收藏本站

云中歌

云中歌 科技文献 查看内容

一次搞懂大数据(上)

2016-11-1 14:46| 发布者: zhongli| 查看: 490| 评论: 0|原作者: 李欣宜|来自: 數位時代

摘要: 当大数据充斥各种场合,从马云到释昭慧都侃侃而谈,你还能不懂什么是大数据吗?你也许已经听过无数的大数据神话,但对于大数据仍停留在一知半解阶段,《数位时代》专访各大大数据专家,整理出你最应该知道的大数据十 ...

当大数据充斥各种场合,从马云到释昭慧都侃侃而谈,你还能不懂什么是大数据吗?你也许已经听过无数的大数据神话,但对于大数据仍停留在一知半解阶段,《数位时代》专访各大大数据专家,整理出你最应该知道的大数据十问。

Q:大数据是什么?

A大数据(Big Data)又被称为巨量资料,其概念其实就是过去10年广泛用于企业内部的资料分析、商业智慧(Business Intelligence)和统计应用之大成。但大数据现在不只是资料处理工具,更是一种企业思维和商业模式,因为资料量急速成长、储存设备成本下降、软件技术进化和云端环境成熟等种种客观条件就位,方才让资料分析从过去的洞悉历史进化到预测未来,甚至是破旧立新,开创从所未见的商业模式。

一般而言,大数据的定义是Volume(容量)、Velocity(速度)和Variety(多样性),但也有人另外加上Veracity(真实性)和Value(价值)两个V。但其实不论是几V,大数据的资料特质和传统资料最大的不同是,资料来源多元、种类繁多,大多是非结构化资料,而且更新速度非常快,导致资料量大增。而要用大数据创造价值,不得不注意数据的真实性。

Volume、Velocity、Variety + Veracity = Value

大數據和商業分析之異同

Q:为什么需要大数据?

A因为当从人到机器都已经被数据解构,数据不仅仅是欧巴马口中的石油或是黄金,它更是血液,贯穿每个人一生中每个生命阶段。这并非危言耸听,更不是科幻电影,而是正在逐步成真的现实。

例如有一款叫做Ovia FertilityApp,藉由分析30万名会员的数据,开发算法,精准计算排卵期,提高怀孕的机率,这个App已帮助5万名会员成功怀孕。又比如Workday推出一套软件,预测员工的薪水涨幅和可能跳槽时间,帮助企业决定每名员工的加薪幅度、时间点和转职时机。理财也逃不过大数据的掌控,腾讯就于年初推出第一家用大数据决定借贷与否的银行,微众银行结合辨识人脸和公安部门资料,决定借贷者的信用等级。

从怀孕生子、工作到理财,大数据将全面影响每个人与每家企业。对企业而言,大数据可望提升服务质量、增加管理效率、帮助决策和创造商业模式;对一般民众而言,大数据是另一个自我,它可能比本人更了解本人,为你预先解决每个未知,当一切都开始数据化,你能够不需要数据吗?

Q:大数据一定要很大吗?

A虽然大数据的狭义定义是,资料量要在100TBPB之间,但其实绝大多数的企业,都不符合这个标准,大企业如eBay、亚马逊或AT&T或许符合大数据的标准。但其实资料量只是大数据的其中一个面向,大数据揭示的是一种「资料经济」的精神,而非只是「大」。

「大,是大数据中最无趣的部分。」天睿信息(Teradata)首席技术长宝立明(Stephen Brobst)认为,企业真正要寻找的是非传统的、而且未曾被挖掘过的资料,并且从这些资料中去提炼出价值,这才是对大数据应有的正确认知,而非只是执着于资料大小,只要能从看似毫无意义的数据矿坑中挖掘出金矿,有谁会在意那座矿坑原本是大得像座山还是小得像狗屋呢?和沛科技创办人翟本乔就指出,大数据这个名字容易让人误导,因为真正重要的其实是大智慧。大数据不只是说资料量有多大,速度快和资料量大都可以用技术轻易解决,但种类(Variety)比较需要智慧。

Q:没有大数据就不能用大数据吗?

A非也,建置大数据架构与环境的确所费不赀,一般中小企业通常无法轻易投入巨额成本,但大数据时代的精神在于如何妥善利用既有或非传统资料,从中挖掘出新商机,因此即使是中小企业甚或者是新创企业,都能在大数据时代用「大数据」。

就技术面来说,现在有许多业者开始提供建置成本较低的大数据处理工具和云端系统,有些甚至跟App一样,只要根据自身需求挑选需要购买的功能即可,例如科智提供的工业化数据管理工具即为一例。另一方面,很多时候中小企业其实不需要建设大数据系统。中研院信息科学研究所研究员陈升玮即指出,在绝大多数情况下,大数据项目其实不需要建置Hadoop系统,特别是台湾的社群媒体没那么发达,而是直接采用国外的居多,资料都不在自己手上,与其盲目追求技术和工具,不如先用小量资料去验证一个概念,是否能将资料转换成商业机会,再来决定要不要建置大数据的作业环境。

大数据领域权威麦尔苟伯格(Viktor Mayer-Schönberger)在《大数据》一书中便提及,大公司有巨量资料的规模优势,但小公司有成本及创新上的优势,小公司因为速度够快、灵活度高,就算维持小规模,还是能够蓬勃发展。

Q:我要怎么开始进行大数据项目?

A设置专门统筹大数据项目的部门和职衔是第一步,而且层级越高越好,企业领导人必须足够正视大数据的力量,才能带动整个组织重视数据的文化。Etu负责人蒋居裕便指出,大数据其实是管理问题,而非技术问题,缺少跨部门协作,大数据项目很难有个美好的开始。

第二步,切勿陷入大数据迷思,与其急着想用数据变现,不如先回头看看自己企业内部的问题为何,先定义问题,再试图用数据找解方。阿里巴巴集团副总裁车品觉建议,与其整天想着大数据,不如先整顿自己企业内部的数据,很多时候光是企业内部的数据就问题丛生,不同部门之间的数据无法兼容,「整个数据在一个中小企业里面也是四分五裂,在这个地方没做好的情况下,居然说你想用大数据,其实是有点难以理解。」

 


鲜花

握手

雷人

路过

鸡蛋

相关阅读


Copyright © 2012-2016 CloudSong Co., Ltd. All replica reserved. 京ICP备1203881
返回顶部