
CDA数据分析师 出品
编译:Mika
【导读】
每天在推特上都有数百万条推文被发送,在这些推文中,我们可以收集到很多关于人们生活的信息:他们什么时候醒来,去哪里旅行,以及他们对几乎所有事情的看法。
在本文中,前纽约时报数据艺术家杰尔·索普探讨了我们可以从这些丰富的数据中得出什么用途。
几年前我开始用推特。它最吸引我的一点是人们会在早上起床的时候,会发一条推特说:“早上好!”
作为一个加拿大人,我喜欢这种问候方式。同时我也是个典型的技术男,于是我写了个程序,用来记录24小时内推特上所有发的“早上好!”。
之后我问了自己一个我最喜欢的问题,“那会是个什么样子?”
结果就像这样:
▲ 全球人们在醒来时发“早上好!”所组成的模型
我们看到这个由世界各地人们在醒来时发“早上好!”所组成的人浪。
当中绿色所代表的人,在早上8点左右醒来。
橙色代表的人,他们在9点左右发“早上好!”
之后这些红色代表的人 ,他们在10点左右发“早上好!”。
我们会发现,10点发的人比8点的多。
而且,事实上如果你观察这幅图,我们就能稍微了解世界各地人们起床时间的不同。
比如说西海岸的人就比东海岸的人起得稍晚一些。
但人们在推特上不只是发这个,对吧?
我们也收到这些推特,诸如:
“我刚刚在奥兰多降落了!!”
▲ 推文“我刚刚在奥兰多降落了!!”
或者“我刚刚降落在德州!” 又或者“我刚刚在洪都拉斯降落了!”
这些内容没完没了,总有人在发这些。
从表面上看,这些人只是告诉我们一些他们的旅行信息。
但是我们都知道真相,不是吗?
这些人就是在炫耀!炫耀他们在开普敦,而我不在!
于是我想,我们如何才能利用这些虚荣,并将其转化成实用的东西?
因此我用类似于处理“早上好”的方法,将所有人的旅行制成统计图。
因为我知道他们在哪落地,他们直接告诉我了。而且我知道他们在哪儿居住,因为他们推特的个人简介上都写着呢。
▲ 全球各地人们旅行数据模型
所以我在推特上建立了一个模型,记录在36个小时内世界各地的人是如何旅行的。
这是一种原始模型,如果我们留意推特和脸书和其它一切社交媒体上的所有人,我们其实会获得一幅清晰的图像,反映人们如何在各地之间旅行。
▲ 36小时内世界各地人们的旅行数据
而这幅图像事实上对科学家来说非常有用,尤其是那些研究疾病扩散问题的专家。
我在《纽约时报》工作。在过去两年里,我们一直做一个叫“Cascade”的项目,它在某种程度上和这个模型很相似。
但是我们不是对人们如何流动,而是对人们如何发表言论进行建模。我们在研究针对某个事件的讨论看起来是怎样的。
这里有一个例子,这是一场围绕一篇文章的讨论。文章名字是《那个人们忘记死亡的小岛》,它描述了一个希腊的小岛,岛上的人们都非常非常长寿。
这里我们所看到的,这是一场从左下角那第一条推特开始延伸开来的讨论。
因此我们得以了解到,在9小时里这场讨论的规模。
▲ 9小时内对文章《那个人们忘记死亡的小岛》的讨论
我们来把时间跨度拉大到12小时。我们也可以在三维的模式下观察这场讨论。
▲ 12小时内对文章《那个人们忘记死亡的小岛》的讨论
而且这种三维的视角其实对我们更加有用。因为作为人类,我们非常习惯于三维的事物。
所以我们能够看着讨论的那些细小分支,来了解到底发生了什么。
这是一个交互式的,探索式的工具。我们可以仔细研究这个讨论的每一步,可以看看:
《纽约时报》每个月产生大约6500篇文章,我们可以为每一篇所引发的议论都建立一个模型。
每个模型看起来不太一样,这取决于故事本身,以及它引起人们议论的速度,还有议论传播的范围。
这些结构我管它们叫“讨论大楼”,最终看起来不尽相同。
我向你们展示的这些项目,我认为它们在做同样的事情。
即我们可以将碎片化的数据拼凑起来,从而产生更大的价值。我们可以用它们来做更激动人心的事情。
但是目前为止我们只提到了推特,而推特不是数据的全部。
正如刚才讨论的,网络上有很多很多很多数据。
我尤其要向你们介绍其中一种。因为你们所有人,这里的每一位观众,包括我在内都是产生数据的机器,我们时时刻刻都在产生数据。
我们每一个人,我们都在产生数据,也有一些人在储存这些数据。
通常来说,我们信任各种储存数据的公司,但是我要在这里提出的是,相比起信任那些公司,让它们储存数据,我们应该相信我们自己。
因为我们拥有那些数据,这是我们应该牢记的,他人对你的任何评价都属于你。
因此,我希望我们所有人能带着我们储存的宝贵数据走到一起,一起利用那些数据来解决某些世界上最棘手的难题。
因为大数据能解决大问题,但是我认为如果我们每个人都参与进来,才能将能使它发挥最大的效用。谢谢!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
随机森林算法的核心特点:原理、优势与应用解析 在机器学习领域,随机森林(Random Forest)作为集成学习(Ensemble Learning) ...
2025-09-05Excel 区域名定义:从基础到进阶的高效应用指南 在 Excel 数据处理中,频繁引用单元格区域(如A2:A100、B3:D20)不仅容易出错, ...
2025-09-05CDA 数据分析师:以六大分析方法构建数据驱动业务的核心能力 在数据驱动决策成为企业共识的当下,CDA(Certified Data Analyst) ...
2025-09-05SQL 日期截取:从基础方法到业务实战的全维度解析 在数据处理与业务分析中,日期数据是连接 “业务行为” 与 “时间维度” 的核 ...
2025-09-04在卷积神经网络(CNN)的发展历程中,解决 “梯度消失”“特征复用不足”“模型参数冗余” 一直是核心命题。2017 年提出的密集连 ...
2025-09-04CDA 数据分析师:驾驭数据范式,释放数据价值 在数字化转型浪潮席卷全球的当下,数据已成为企业核心生产要素。而 CDA(Certified ...
2025-09-04K-Means 聚类:无监督学习中数据分群的核心算法 在数据分析领域,当我们面对海量无标签数据(如用户行为记录、商品属性数据、图 ...
2025-09-03特征值、特征向量与主成分:数据降维背后的线性代数逻辑 在机器学习、数据分析与信号处理领域,“降维” 是破解高维数据复杂性的 ...
2025-09-03CDA 数据分析师与数据分析:解锁数据价值的关键 在数字经济高速发展的今天,数据已成为企业核心资产与社会发展的重要驱动力。无 ...
2025-09-03解析 loss.backward ():深度学习中梯度汇总与同步的自动触发核心 在深度学习模型训练流程中,loss.backward()是连接 “前向计算 ...
2025-09-02要解答 “画 K-S 图时横轴是等距还是等频” 的问题,需先明确 K-S 图的核心用途(检验样本分布与理论分布的一致性),再结合横轴 ...
2025-09-02CDA 数据分析师:助力企业破解数据需求与数据分析需求难题 在数字化浪潮席卷全球的当下,数据已成为企业核心战略资产。无论是市 ...
2025-09-02Power BI 度量值实战:基于每月收入与税金占比计算累计税金分摊金额 在企业财务分析中,税金分摊是成本核算与利润统计的核心环节 ...
2025-09-01巧用 ALTER TABLE rent ADD INDEX:租房系统数据库性能优化实践 在租房管理系统中,rent表是核心业务表之一,通常存储租赁订单信 ...
2025-09-01CDA 数据分析师:企业数字化转型的核心引擎 —— 从能力落地到价值跃迁 当数字化转型从 “选择题” 变为企业生存的 “必答题”, ...
2025-09-01数据清洗工具全景指南:从入门到进阶的实操路径 在数据驱动决策的链条中,“数据清洗” 是决定后续分析与建模有效性的 “第一道 ...
2025-08-29机器学习中的参数优化:以预测结果为核心的闭环调优路径 在机器学习模型落地中,“参数” 是连接 “数据” 与 “预测结果” 的关 ...
2025-08-29CDA 数据分析与量化策略分析流程:协同落地数据驱动价值 在数据驱动决策的实践中,“流程” 是确保价值落地的核心骨架 ——CDA ...
2025-08-29CDA含金量分析 在数字经济与人工智能深度融合的时代,数据驱动决策已成为企业核心竞争力的关键要素。CDA(Certified Data Analys ...
2025-08-28CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-08-28