京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据要开拓的下一个疆域是个人
大数据和个人数据正汇集到一起,构筑互联网上最令人惊叹的消费者产品。它们会预测你的需要,存储你的记忆——如果你允许它们这么做的话。
你会用你的个人数据换取对未来的一瞥吗?安德烈亚斯·韦恩德(Andreas Weigend)就这么做了。
韦恩德曾是亚马逊网站的首席科学官,现任斯坦福大学社会数据实验室主管。他给我说了一个他自己的故事。某天,他在天亮时分醒来,准备去机场搭乘从上海飞来的航班。这时,他刚开始使用的应用程序Google Now告诉他,这趟航班延误了。
这个软件会在用户的Gmail邮箱、日程表,以及地图和航班时刻表之类的数据库里四下查看。它在韦恩德的出行计划中发现了这个小差错,于是提醒他不需要赶时间。韦恩德登机时,飞机上的其他人都已经在机场枯坐了好几个小时,要等飞机的一个备用部件运抵。
韦恩德提供消费者行为方面的咨询,也就这些内容授课。他语速很快。对他来说,他经历的这类小插曲显示了“一个基于10倍数据的社会所具有的能力”。他说,如果上个世纪的标志性成就是对有形物质互动的观察能力(想想X光和雷达技术),那么本世纪的标志性能力将是通过人们与他人分享的个人数据来研究他们。
像Google Now这样所谓的预期系统是未来技术的例子之一。我们已经看到了大数据给广告这类可以一次测量数百万人的行为的业务所带来的转变。现在数据科学家们正在思考大数据如何能够帮助个人。及时通知一架联航班机的飞行情况可能是比较乏味的应用之一。但是,想象一下这样的数据模式:它能告诉你该找什么工作,或者在你感觉不适之前就提醒你可能感冒了。
计算机能够获得的个人数据正在极大膨胀,推动了这样的趋势。根据咨询公司IDC的统计,全世界创造的数字数据每两年增加一倍,而其中大部分是由消费者生成的:电影下载、IP语音电话、电子邮件、手机位置显示等等。但其中仅有约0.5%的数据被分析过。
“存在着那么多数据可以拿来服务于个人的需要,而且是可负担的,”在伦敦大学学院研习社交网络的数据学家帕特里克·沃尔夫(Patrick Wolfe)说,“统计学的优势来自于把人们汇集在一起,但这之后,锦上添花的事是把你的发现个人化。”
谷歌、Facebook、LinkedIn这些硅谷的数据精炼厂把合并大数据和个人数据作为一个目标已经有些日子了。这种合并创造出广告商可以使用的工具,也创造出尤其“让人上瘾”的产品。毕竟,有什么比你自己更有趣呢?Facebook告诉你谁可能是你的朋友。你给Google Now的数据越多,它会为你服务得更好。
暴露更多个人数据似乎无可避免。韦恩德说,随着装载了加速器、摄像头和GPS的智能手机的销量大增,“人们已经获得了收集和传送个人数据的装备”。而这可能只是刚开始。已经有一小批技术爱好者发起了“自我量化”运动:在自己身上装上传感器、计步器,甚至植入葡萄糖监测器。在本期商业报告中,我们将介绍搜索引擎Wolfram Alpha的创造者斯蒂芬·沃尔弗拉姆(Stephen Wolfram)。沃尔弗拉姆参与一个大型的自我跟踪项目已有多年。他把自己的电子邮件、敲击电脑键盘,甚至身体运动的情况都记录归档。他对预测性应用程序感兴趣,称它们为“个人分析”。他认为,就像他的搜索引擎试图组织、整理全世界所有的事实,“在个人分析中,你需要做的是试着把某个人的人生方方面面的信息聚集起来。”
沃尔弗拉姆说,现有的障碍是一些最有用的数据没被捕捉到,至少不能被轻易获得。部分原因是技术上的:缺乏整合。但大量数据是由Facebook、苹果和Fitbit(一个流行的计步器的生产商)这类私人公司存储着。现在,个人数据的价值日益显见,争端正在酝酿中。加州议员们今年提出了“知情权”(Right to Kow)法案,要求公司向个人公布他们储藏的“个人信息”,也就是每次追踪方位和IP地址的数字拷贝。
这项法案是要求隐私保护和问责的社会运动的一部分。与此同时,它也对数据提供者和数据运用者之间的经济关系做出了重新安排。人们想更多地从大数据直接获益,对此业界做出了怎样的回应?
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据可视化领域,单一图表往往难以承载多维度信息 —— 力导向图擅长展现节点间的关联结构与空间分布,却无法直观呈现 “流量 ...
2025-10-27这个问题问到了 Tableau 中两个核心行级函数的经典组合,理解它能帮你快速实现 “相对位置占比” 的分析需求。“index ()/size ( ...
2025-10-27对 CDA(Certified Data Analyst)数据分析师而言,“假设检验” 绝非 “套用统计公式的机械操作”,而是 “将模糊的业务猜想转 ...
2025-10-27在数字化运营中,“凭感觉做决策” 早已成为过去式 —— 运营指标作为业务增长的 “晴雨表” 与 “导航仪”,直接决定了运营动作 ...
2025-10-24在卷积神经网络(CNN)的训练中,“卷积层(Conv)后是否添加归一化(如 BN、LN)和激活函数(如 ReLU、GELU)” 是每个开发者都 ...
2025-10-24在数据决策链条中,“统计分析” 是挖掘数据规律的核心,“可视化” 是呈现规律的桥梁 ——CDA(Certified Data Analyst)数据分 ...
2025-10-24在 “神经网络与卡尔曼滤波融合” 的理论基础上,Python 凭借其丰富的科学计算库(NumPy、FilterPy)、深度学习框架(PyTorch、T ...
2025-10-23在工业控制、自动驾驶、机器人导航、气象预测等领域,“状态估计” 是核心任务 —— 即从含噪声的观测数据中,精准推断系统的真 ...
2025-10-23在数据分析全流程中,“数据清洗” 恰似烹饪前的食材处理:若食材(数据)腐烂变质、混杂异物(脏数据),即便拥有精湛的烹饪技 ...
2025-10-23在人工智能领域,“大模型” 已成为近年来的热点标签:从参数超 1750 亿的 GPT-3,到万亿级参数的 PaLM,再到多模态大模型 GPT-4 ...
2025-10-22在 MySQL 数据库的日常运维与开发中,“更新数据是否会影响读数据” 是一个高频疑问。这个问题的答案并非简单的 “是” 或 “否 ...
2025-10-22在企业数据分析中,“数据孤岛” 是制约分析深度的核心瓶颈 —— 用户数据散落在注册系统、APP 日志、客服记录中,订单数据分散 ...
2025-10-22在神经网络设计中,“隐藏层个数” 是决定模型能力的关键参数 —— 太少会导致 “欠拟合”(模型无法捕捉复杂数据规律,如用单隐 ...
2025-10-21在特征工程流程中,“单变量筛选” 是承上启下的关键步骤 —— 它通过分析单个特征与目标变量的关联强度,剔除无意义、冗余的特 ...
2025-10-21在数据分析全流程中,“数据读取” 常被误解为 “简单的文件打开”—— 双击 Excel、执行基础 SQL 查询即可完成。但对 CDA(Cert ...
2025-10-21在实际业务数据分析中,我们遇到的大多数数据并非理想的正态分布 —— 电商平台的用户消费金额(少数用户单次消费上万元,多数集 ...
2025-10-20在数字化交互中,用户的每一次操作 —— 从电商平台的 “浏览商品→加入购物车→查看评价→放弃下单”,到内容 APP 的 “点击短 ...
2025-10-20在数据分析的全流程中,“数据采集” 是最基础也最关键的环节 —— 如同烹饪前需备好新鲜食材,若采集的数据不完整、不准确或不 ...
2025-10-20在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17