淘宝网推出人口迁徙数据 大数据技术揭秘_数据分析师

日前，淘宝公布了人口迁徙数据，正是利用大数据技术的普及，普通人才能窥探出哪些城市是用工的热门城市，同乡都喜欢去哪些城市工作。实际上，随着移动互联网的普及，越来越多的人利用网络购物、消费、娱乐……也正是每个人无处不在的网络活动，构成了大数据，让大数据得出的结论方便我们的生活。

最热应用 互联网公司推人口迁徙数据

伴随着春运，人口迁徙图成为今年春节最热门的互联网应用之一。在正月十五的前夕，淘宝网推出了人口迁移数据。

据淘宝网介绍，其中涉及的迁徙用户中，85%的人是18-34岁的青壮年。虽然近年来“逃离北上广”的声音不绝于耳，但淘宝的数据显示，北京、上海、广州等大城市的人口依旧呈“正向”流入的趋势。而去年迁徙人口位居首位的省份为广东，说明广东依然是对务工人员最有吸引力的地区。“这主要是因为珠三角是大规模劳动密集型产业地区，以及以往的‘路径依赖’决定的。”北京大学中国社会与发展研究中心主任邱泽奇解释了该数据。但同时难以忽略的是，流入北上广一线大城市的人口增幅正在收窄，其中以北京为最。根据淘宝迁徙数据显示，去年北京新增迁移人口比2012年少了三分之二。

来自淘宝的迁移数据还显示，大部分地区的人选择迁徙的目的地，都是离自己原所在地相对较近的地区。如安徽人最爱前往的地方是江苏和浙江；河北人则更多迁往北京和天津；湖南、湖北、江西人，则选择广东作为“下一站”；宁夏人则选择陕西的较多。

实际上，不仅是淘宝，此前百度在春运期间对网民开放了“百度迁徙”网页，所有网民都可以访问该专题页面，通过可视化大数据的方式，了解全国春运的最新动态，包括全国春运最热的线路，最热门的迁出城市、迁入城市等。而阿里旗下的支付宝也利用大数据发布了《支付宝用户春运报告》。

五花八门 互联网应用暗藏大数据

除了上述人口迁徙利用了大数据外，其实在网民使用的各种网络应用中，都会或多或少见到大数据的身影，像打车软件、互联网金融创新、网购消费等。

在手机打车市场，阿里巴巴的快的和腾讯的嘀嘀激战正酣。“表面上看，阿里和腾讯抢的是打车软件和移动支付市场，实际上，他们更大的目的在于大数据和O2O市场。”一位分析人士认为，通过这些软件打车，司乘人员的信息都很透明，互联网公司可以通过对用户打车习惯、打车路径等数据的积累、分析，叠加地图服务、生活信息服务等内容，实现多重服务提供，增加客户黏度，从而与商家以及消费者形成合作，实现赢利。

比如，某一位乘客经常打车到某一目的地，互联网企业掌握这一数据后，可以在该用户使用地图软件时，载入周边的商场、餐馆等信息，实现精准营销。

而电商在销售商品时也会用到大数据，除了根据用户搜索数据推送相关商品外，还应用大数据推出适合消费者的产品。日前京东推出的“JDPhone”计划，就是通过大数据挖掘用户真实需求，深度整合产业链资源，为用户打造最具性价比、超出期望的精品手机。

在去年“双12”时，淘宝也曾运用大数据技术进行促销。淘宝根据不同的人群需求，划分出200多个购物场景。“场景购物”意味着消费者可以只凭着一个模糊的想法，甚至只是一个感觉，就能找到所需商品并一站购齐。

此外，在“双12”时，淘宝在购物的各个环节为消费者提供购物预测。根据消费者在过去一年的消费特征，将所有红包、秒杀商品经过个性化数据匹配后，推荐给用户。

在互联网金融方面，日前京东推出的“白条”业务，是消费者在京东购物消费时，享受“先消费、后付款”的延后付款或“分期0元购”的分期付款服务。“这一业务是通过对消费、金融和大数据的深入分析和理解，对用户的消费记录、配送信息、退货信息、购物评价等数据进行风险评级，建立信用体系，为消费者提供的信用服务。”京东消费金融业务相关负责人表示。

技术揭秘 大数据是怎么来的

对于淘宝推出的人口迁徙数据，淘宝网有关负责人介绍，此次数据统计是根据用户180天内，默认收货地址信息的分析得出的。而百度相关人士介绍，百度迁徙是在“春运人口迁徙密集、中国手机渗透率高”的背景下，通过抓取分析手机网民定位信息的大数据，绘制出人群的迁徙轨迹。

“通俗地说是位置的变化，比如现在在这里使用手机，过了几个小时以后，我们发现你在上海使用了手机。我们知道你的位置在这几个小时的时间里发生了变化。”百度LBS(位置信息服务)技术总监顾维灏解释春运数据的获得。

据透露，支撑百度迁徙的LBS开放平台聚集了超过40万开发者，为数十万款APP提供定位服务，覆盖数亿部手机，每天产生35亿次的定位请求，每秒就有4万次的定位请求。

与百度通过定位方式获得大数据不同的是，支付宝方面的春运数据，则是基于支付宝的实名用户，并利用大数据技术交叉分析得出。小微金服数据实验室有关负责人表示，其是通过实名注册用户的出生地(通过身份证号码前几位来判断)与现居地(比如常用收货地址)之间的关系，并对比其他模型数据，从而描绘出在春运期间支付宝用户的一些行为特征。

应用前景 大数据如何造福社会

对于网购大数据应用，消费者能感受到购物的便捷。而像人口迁徙等大数据的应用，是否只为满足人们的好奇心，还是有其社会价值呢？

以百度迁徙为例，百度方面表示，百度迁徙是一个社会公益项目，百度期望这一项目能服务于政府部门的科学决策，赋予社会学等科学研究以新的观察视角和方法工具。“北京市人口现在到底是什么状态，通过以往的方法，我们很难准确研判。”有业内人士表示，“但大数据解读就可以分析人口流动趋势、交通拥堵情况等细节，为城市管理提供支撑平台。”

人口迁徙的另一个价值是商圈分析。比如北京中关村的商圈，通过轨迹分析，可以看到一些购物中心人非常多，而一些购物中心的顾客流量并不是很大，这些数据可以帮助优化商圈，更好地配置资源。实际上，目前，阿里巴巴已经在利用大数据技术提供阿里信用贷款与淘宝数据魔方。腾讯则通过社交网络数据挖掘打造全新营销平台，为广告主实现精准营销。百度建立了百度指数、司南、风云榜、数据研究中心、百度统计等五大数据体系平台，提供企业实时数据服务。

目前在数据价值的发挥上，京东、天猫、易讯等电商已展开与第三方机构的合作，试图通过对用户各种数据分析，展示各自在网购市场上的优势。但据业内人士透露，电商对供应商数据分享并未完全开放。

个人隐私 法规保护个人信息

数据越来越大，担忧似乎也越来越多。在电子化时代，所有跟我们个人信息相关的数据，几乎都流淌在网络中。未来，也许一个节点的数据泄露，就是个人甚至周边人的整个人生的信息曝光……

对于个人隐私问题，刚刚公布的即将于今年3月15日起实行的《网络交易管理办法》，就对保护消费者的个人信息做了规定。该办法规定：网络商品经营者、有关服务经营者在经营活动中收集、使用消费者或者经营者信息，应当遵循合法、正当、必要的原则，明示收集、使用信息的目的、方式和范围，并经被收集者同意。网络商品经营者、有关服务经营者收集、使用消费者或者经营者信息，应当公开其收集、使用规则，不得违反法律、法规的规定和双方的约定收集、使用信息。

网络商品经营者、有关服务经营者及其工作人员对收集的消费者个人信息或者经营者商业秘密的数据信息必须严格保密，不得泄露、出售或者非法向他人提供。网络商品经营者、有关服务经营者应当采取技术措施和其他必要措施，确保信息安全，防止信息泄露、丢失。在发生或者可能发生信息泄露、丢失的情况时，应当立即采取补救措施。

什么是大数据

形象地说，以去年“双11”为例，淘宝当日达成近两亿笔交易，总交易额达创纪录的350余亿元，这些交易记录就形成了那天疯狂网购的大数据。

IBM公司在其大数据网站首页上说，最近两年产生了人类社会诞生以来90%的数据量。

这些数据来自方方面面:传感器采集的气候信息、网站上的帖子、数字照片和视频、购物交易记录、手机GPS信号等。尽管尚无统一定义，但这些无比庞大的数据被称为“大数据”。

我们在搜索引擎中每一次搜索的记录、在电子商城中每一次的商品浏览和购买记录、每一次电子支付的数据……这些看似不相干的庞杂数据，汇总在一起，经过分析提炼，一般即可描绘出这个人的行为习惯概况，并对未来可能采取的行为作出概率相当高的预测。

利用大数据技术，将上述众多无头绪的信息编织在一起，经过分析筛查，就能够精确地指向潜在客户，这也是大数据被商家们寄予厚望的原因所在。