登录
首页精彩阅读大数据分析洞察 发挥越来越重要作用_数据分析师考试
大数据分析洞察 发挥越来越重要作用_数据分析师考试
2015-07-29
收藏

大数据分析洞察 发挥越来越重要作用_数据分析师考试


1.利用每天数十亿次的服务定位数据,呈现出一张动态更新的春节人口大迁徙地图

在北京中关村工作的孙超,今年除夕下午才坐高铁回山东老家。与往年不同,对这个大学刚毕业的IT工程师来说,这次他知道自己的回家路线是此时全国最热门的春节迁徙线路之一。他甚至还知道,除夕当天,从北京迁出的人口是最多的,四川、山东和河南是最热门的目的地,而老家在河南和四川的人是回家最晚的,因为当天这两个省迁入的人口最多。

这些让人耳目一新的“知识”来自于“百度地图春节人口迁徙大数据”项目——利用百度后台每天数十亿次基于地理位置服务(LBS)的定位数据进行计算分析,来展现春节前后人口大迁徙的轨迹与特征。普通网民只需要访问“qianxi.baidu.com”这个网页,就可以看到一张迁徙地图,通过选择不同的路线、城市和时间,了解全国春运的最新动态,包括当前全国春运最热的线路,最热门的迁出迁入城市等。

春运是我国乃至全球范围内最大规模的短期人口迁移活动之一,通讯是人们在迁徙过程中最基本需求之一,因此手机网民与迁徙人群重合度极高,迁徙人群绝大多数都是手机网民。手机上网时使用的定位服务,同时也反映出手机所在位置。百度LBS技术总监顾维灏介绍说,“我们分析的是位置的变化,比如你这会在北京使用手机,过了几个小时以后发现你在上海使用手机,这就说明你的位置在这几个小时内在变化。”百度通过云计算平台的数据处理分析能力,加上精准的定位,打造了一张较为全面、准确、即时的反映人口迁徙状况的“大迁徙”地图。

“从这个图上,可以看出春节人口迁徙的趋势在哪里,我们甚至标注了全国300多个地级市,可以即时了解迁徙动态。”顾维灏说,通过时间维度的分析,还可以比较不同日期同一时段迁徙情况的不同。作为一次尝试,1月25日上线的百度“大迁徙”地图刚刚在2月14日停止数据更新。

中国传媒大学调查统计研究所所长沈浩认为,百度本次推出的人口迁徙大数据,用可视化的方式展现了中国春运迁徙的盛况,是一项非常有价值的创新。

“通过百度人口迁徙数据研究春运人口流向,可为交通部门的政策和服务提供参考,其开放后,也可以为普通百姓、企业提供生活、生产的参考,具有很大的社会价值。”沈浩说。

2.手机定位请求就像一个人的足迹,大数据集合了个人用户碎片行为

百度的“大迁徙”地图既让公众用另一种方式来体验春运,也给普通人创造了近距离接触大数据的机会。

“这张图显示了移动地图乃至移动互联网对日常生活产生的影响。”顾维灏说,移动互联网之所以“移动”,在我们看来就是可以通过包括定位在内的位置服务,给普通人提供差异化服务。

统计数据显示,截至去年12月,我国手机网民数量已高达5亿,在这个背景下,手机网民产生的定位服务数据量已经是“大数据”的级别。去年8月,百度地图LBS开放平台就已一天接受35亿次的定位服务请求,相当于每秒4万次。

发现知识正是大数据的真正价值,仅仅存储数据而不去挖掘内在信息并没有意义。目前百度LBS开放平台聚集了超过40万的第三方开发者,为数十万款APP提供后台定位服务,已覆盖数亿部手机。“有更多的定位需求,就产生更多的数据,我们会根据时间、地点、热点和区域性,从这些大数据中挖掘出更多知识,产生更多新的产品创意。”顾维灏说,春运迁徙地图,就是在百度的大数据分析能力基础之上,去挖掘基于地理位置服务特有的数据和特有的知识,从而诞生的一个创新产品。

做迁徙地图前,百度还做了几个有意思的事情。如对北京海淀黄庄地铁站做了分析,通过定位密度反映出人群密度,发现地铁D出口基本上没有什么人走。这种关于公共设施的数据,就可以分享给相关部门参考优化配置。

专家介绍说,手机定位请求就像一个人的足迹,从这个足迹里,可以看出哪些商铺是热门的,或者某类人群更喜欢什么样的商铺,这种分析结果可以用来优化线下和线上的交易,“足迹”也可以用来预测、挖掘城市的路况信息,实时发现或者是预测道路的拥堵情况,避开拥堵,走更顺畅的道路。

百度高级副总裁王劲认为,移动互联网的发展使人们随时随地都在创造数据,开发者要充分利用大数据进行智慧化运营,开发出新一代应用。网络中的“足迹”、点击、浏览、留言直接反映消费者的性格、偏好、意愿等。大数据也可以看成是每个用户碎片行为的集合。

大数据不仅体量巨大,而且种类繁多。目前互联网交互数据占比越来越大,约为大数据总容量的85%,传统行业的数据大概只有15%。而由于社会全面数字化,数据产生的来源和类型越来越多,速度越来越快,全球所有信息数据中90%产生于过去两年,每天新增的数据量有25PB,相当于1500个国家图书馆信息量的总和。

3.大数据的效应不仅仅是在移动互联网上,将有助于促进信息消费和社会民生

大数据的效用不仅仅是在移动互联网上,它被认为是继云计算、物联网之后信息技术产业又一次颠覆性的技术变革,对经济发展、企业的决策、组织和业务流程、个人生活方式都将产生巨大的影响。目前,大数据的开发和利用在国内还处于起步阶段,一些电子商务企业利用大数据做一些研究报告和趋势分析,而从趋势看,未来大数据将会拓展到科研和政府管理领域。

“大数据时代的来临对信息技术应用的影响主要有两个方面:一方面促使数据获取、数据存储更广泛,如出现云计算、云存储;另一方面激发了信息技术挖掘数据的强烈需求,未来发展更趋向于信息的价值提升和决策智能化,例如建设智慧城市。”神州数码专家史文钊说。

百度董事长兼首席执行官李彦宏认为,大数据目前在两个方面表现出最重要的价值,一是促进信息消费,加快经济转型升级,二是关注社会民生,带动社会管理创新。

传统制造业有了大数据,可以从“制造”向“智造”升级——从产品设计端到最终销售,都可以通过大数据进行智能分析。企业可以快速响应市场需求、科学研发产品,并且精准营销。目前汽车行业已在借助大数据,对数亿网民与汽车相关的请求进行大数据挖掘,形成行业指数和分析报告,帮助汽车企业了解消费者需求。内容创新方面,手机、电视、冰箱等传统电子和电器产品,由于有了大数据,产品变得智能化,激发了用户的新一轮消费需求。消费者的强劲需求,又直接促进了企业利用大数据进行产品形态和内容的创新。

社会管理创新方面,春运迁徙地图这个普通人亲近大数据的案例,是交通领域基于数据的一次新尝试。未来在教育、就业、公共卫生等众多关键领域,大数据的分析洞察,也将发挥越来越重要的作用。

数据分析咨询请扫描二维码

客服在线
立即咨询