大数据时代：从预言走向现实_数据分析师

其实早在1980年，未来学家阿尔文·托夫勒就在书中把大数据热情赞颂为“第三次科技浪潮的华彩乐章”。

“预测”是大数据的力量核心

    2008年，英国《自然》杂志首先提出了大数据概念。然而，什么是大数据，依然众说纷纭。目前比较流行的大数据特性被归纳为4个V，即Volume，Variety，Value，Velocity，分别对应：数据体量巨大；数据类型繁多；数据本身有潜在的价值，但价值比较分散；数据高速产生，需高速处理。

    虽然目前对大数据还没有一个共识性的定义，但它已然在改变我们的生存方式。

    “大数据的核心就是预测，不是要教机器像人一样思考，而是要把数学计算运用到海量数据上，来预测事情发生的可能性”，被称为“大数据时代预言家”的牛津大学网络学院互联网研究所治理与管理专业教授维克托·迈尔-舍恩伯格说。

    预测，作为大数据的力量核心，早已被多次证明。

    微软公司全球常务副总裁布拉德·史密斯曾介绍说，微软生产的一款数据驱动软件，通过跟踪取暖器、空调、风扇以及灯光等积累下来的超大量数据，便可知道如何杜绝能源浪费，“可以为世界节约40%的能源。”与之类似的，谷歌公司也通过对搜索关键词进行分析，比政府检测部门提早两周预测到禽流感散布，提供预警服务。

    美剧《超感警探》中的心理专家只能依靠神奇的特异功能破获毫无头绪的案件。而现实中，洛杉矶警察已经可以通过犯罪预测软件的使用，计算出某地发生犯罪的概率、犯罪类型，以及最有可能犯罪的时间段，使洛杉矶山麓地区的盗窃案减少25%。

    “大数据的出现，使得通过数据分析获得知识、商机和社会服务的能力，从以往局限于学术精英圈子扩大到了普通的机构、企业和政府部门。”IT评论人谢文这样评价大数据带来的变化。

    “大数据开启了一个重大的时代转型。就像望远镜让我们感受宇宙，显微镜让我们能够观测到微生物一样，大数据正在改变我们的生活以及理解世界的方式，成为新发明和新服务的源泉，而更多的改变正蓄势待发”，维克托·迈尔-舍恩伯格预言，围绕大数据的商业价值开发和利用，将成为行业人士争相追捧的焦点。

多个领域试水大数据

    “与国外相比，我国的大数据在产业觉醒、产业创新和投资等方面大约存在一年半的差距，主要体现在国外的基础设施硬技术创新方面明显超过我国。国内目前多集中在泡沫较多的垂直应用领域，但是这个差距并不可怕，基本上可以说还处在同一起跑线上。”《大数据时代》译者、电子科技大学互联网科学中心主任周涛认为。

    近年来，国内很多基于大数据技术的科技企业诞生，为互联网行业甚至传统行业带来了新气息。

    2009年，苏萌和朋友合伙成立了北京百分点信息科技有限公司，成为国内最早从事第三方数据提供和分析的企业之一。他们通过分析客户的消费偏好，为企业提供精准的营销服务，“我们实际是在为网络上每个匿名的ID‘画像’。通过多个维度分析，顾客偏好和特征逐渐清晰。”苏萌介绍，当顾客登录凡客或者1号店时，机器会根据数据进行分析，就像一位懂得读心术的导购，能预测到顾客最有可能对哪件或者哪类商品感兴趣。

    除了像“百分点”这样从事第三方数据提供的公司，很多大型互联网公司早已通过挖掘自身数据资源，为己所用。同时，一些高校也开始试水大数据。如华东师范大学云计算与大数据科学与工程研究院的建立，“通过开展大数据相关的基础和应用研究，集聚和造就一批大数据研究创新团队，培养一批具备大数据思维方式和分析能力的创新型人才。”华东师范大学副校长朱自强说。

    近年来，国家也积极布局大数据。2011年，工信部发布物联网“十二五”规划，把信息处理技术作为4项关键技术创新工程之一，其中包括海量数据存储、数据挖掘、图像视频智能分析，都是大数据的重要组成部分。我国还把基于物联网、云计算等新一代信息技术的智慧城市建设搬上日程。目前，我国智慧城市试点已达193个，将在智慧交通、医疗、家居等方面与大数据建立联系。

    “互联网大数据是和公众最接近的大数据应用，但在科学研究、企业和政府决策、金融等领域的大数据应用对我们生活的影响力可能会更大。对有些行业，数据的利用可能会颠覆原有的采购、生产、销售等决策流程。”华东师范大学软件学院教授钱卫宁认为。 

增加用户隐私泄露的风险

    有一个经典案例被从事大数据的人常常提到。

    一位生活在美国的父亲怒气冲冲地跑到一家超市与经理大吵，原因是只有15岁的女儿购物后，回家发现商品中被加入了很多针对婴儿孕妇商品的广告。

    两周后，父亲向经理道歉，这时他才知道自己女儿已经怀孕近两个月，父女都不知道，可是数据分析公司已经根据她女儿近期的网络数据预测到，接着把数据推送给超市，告诉他们可能有一个已经怀孕的顾客正在购物。

    还有一个离我们比较近的例子。华东师大数据中心的预警系统模块之一，餐饮预警系统可以对学生的餐饮消费数据进行统计分析，发现低于警戒值就会发出短信慰问，确定学生是否有经济困难。 

    这就是大数据洞察人的方式。在体会到大数据神奇力量的同时，也让很多人对自身数据安全而担忧。 

    “大量数据的汇集不可避免地加大了用户隐私泄露的风险。一方面，数据集中存储增加了泄露风险，也成为人身安全的一部分；另一方面，一些敏感数据的所有权和使用权并没有明确界定，很多基于大数据的分析都未考虑到其中涉及的个体隐私问题。”工业和信息化部赛迪智库的冯伟在刊载于媒体的署名文章中指出。

    对一般用户的担忧，周涛却认为，普通用户如果要真正融入大数据时代，享受个性化专属信息服务，不得不牺牲一部分个人隐私。 

    “政府和业界需要做的，是设计非常苛刻严格的法律条例和行业规则，全力打击那些除了提供非侵入性的或用户同意的服务外，以伤害用户的方式利用用户隐私牟利的企业。通过提高对侵害用户隐私行为的惩罚力度，使得这种行为本身变得得不偿失。”周涛认为这才是根本保护治理数据安全的办法。

    “大数据对技术和应用所带来的挑战是全方位的。”钱卫宁认为，“数据资产化后，数据监护将成为一个新的核心问题，是对数据的产生、收集、保存、维护、处理、利用的整个生命周期的管理。数据安全与隐私保护也是数据监护的一个方面。有效的数据监护和服务模型是大数据从一系列的问题走向成功应用的关键。”