
美国政坛大数据巫师:Nate Silver
科学界也有像Elon Musk那样玩嘛嘛酷的偶像派人物?当然有,除了美国总统奥巴马想跟他玩以外,恐怕未来每届的总统候选人也都想跟他玩,他就是美国当前政治圈里的超级新星Nate Silver,号称为美国公众眼里完美的预言帝,他的预言被称为竞选预测之神谕。
这哥们曾单枪匹马打败了所有时政记者、政党媒体顾问以及政治评论员,让研究数字的书呆子们好好风光了一把,美国人也因此说奥巴马的胜利也是统计学家的胜利。让我们把时间追溯回2012年美国总统大选时,当时奥巴马和罗姆尼选情普遍认为很接近,评论员们都无法预计哪方会获胜,Silver却计算出真实情况指出二者并非处于旗鼓相当的局面,在投票当天他成功预测奥巴马将有90.9%机会获得大多数选票,最后他对美国50个州投票结果的预测全对了。事实上,2008年的总统大选他也预测对了最终结果,美国50个州的投票结果他预测对了49个。
Silver的选情分析被极度精妙的美国政治评论圈认为是达到了前所未有的水平,但因为他所使用的是被学界称为巫术统计的贝叶斯理论,所以也招惹来频率学派和一些保守的统计科学家们质疑,还有一些来自政党和媒体们的指责,因为Silver的预测就像是军事级别而且是精确到个人的倾向式报导,接下来的每一次大选,整个政治圈和媒体圈只能坐以待毙。
大数据是非常重要的工具,而不是一个游戏
在美国,做选情预测的统计员不计其数,之所以Silver能够一战成名成为美国数据超人,皆因他在大选的节骨眼上一个人证明了大多数时政评论员是无用,同时他在纽约时报网站的博客让众多企业看到了大数据应用的真实性和大数据可视化、行业化的希望。
Silve在2008年大选结束之后,很快就出版了他的处女作《信号与杂音:预测学的艺术与科学》,牛津大学数据专家维克多迈耶曾对这本书称赞道,大数据革命将改变我们的生活、工作和思维模式,我们不必担心数据对我们自身有多大的相关性,大数据会让我们看清楚假说意义,未来它将会成为影响我们决策的重要因素,因为它重塑了我们眼前的世界。
事实上,Silver也开始担心:他的声望将会影响往后的选情,也将失去旁观者清优势。他并不希望人们视他为科学界占卜的巫师,不希望人们因此迷信这些预测,预测是一门严谨科学,不是一种游戏,我们要用来衡量我们主观现实是否能与客观世界吻合。
从大数据实用性来看,大数据可以帮我们解决如灾害预告、财务预告等实际问题,但Silver也指出,数据是有陷阱的,人们经常对数据产生虚有的危险幻想。概率性思考还是绝对性思考在预测中有着截然相反的导向,如果不能做到诚实地看待数据,预测有可能变成灾难,忽略事物的不确定性往往会导致严重后果。
Silver举例分析,1997年时美国国家气象局预测,大福克斯的洪水水位是49英尺,镇上的防洪堤限定为承受51英尺的洪水,并未将通过历史数据的正负9英尺误差算进去,结果洪水达到了54英尺,大福克斯遭遇了特大洪水灾难。日本福岛核反应堆是另外一个活生生的样本,过去45年间福岛最大的地震记录是里氏规模8.0级,日本地震研究人员参考这个数据后,他们预测该地区不会超过里氏9.0级的地震规模,然后按8.5级的防震标准来建造核反应堆,而事实上福岛在过去更早的时间曾发生过9级地震,但这种情况被认为排除了,这个预测最终为日本乃至全球带了历史性的灾难。
数据本身是不能为自己代言的,我们经常是带着偏差的思想、个人兴趣的情况开展数据分析,我们必须知道在你所接收到信息和你知道的信息之间是存在巨大鸿沟的。Silve同时指出,是否看到自己弱点也对分析数据有较大的影响,因为明白自己弱点人反而会采取一定办法来抵消它的作用。
相比而言,他认为从民众调查得回来的建模数据更可靠,因为没有经过媒体的渲染,直接到达他手中民意信息更真实,民众是不可能持续性地高度关注政治动态的。因而,他在做选情分析时尽量回避和两边的竞选团队打交道,因为这些信息大部分是干扰的杂音,大多数政治观察家往往容易掉进候选人形形式式的辩论和拉票情况
如果你想成功,可寻找和大数据相关、竞争性较小的领域。
今年三十五岁Nate Silver,既没有从哈佛耶鲁大学辍学的经历,也没有从实验室建造改写历史记录数学模型的成绩,甚至可以说在美国大街上随手抓一个都有可能都比他优秀。
从芝加哥大学获得经济学学位后,他去了毕马威担任顾问,那四年时间后来成为了他人生中最后悔的四年时间,后来他开始沉迷于网络扑克,但从网友手中赢得的钱足够能让他辞掉工作靠玩扑克为生。他六岁的时候,家乡的棒球队底特律猛虎赢得了美国职业棒球全国锦标赛的冠军,也是在那个时候Nate Silver开始接触并爱上了各种棒球统计数据。在他转向政治数据预测之前,他是一名棒球选手成绩的预测高手。
棒球燃点了Silver对数据的热情,而Silver燃点了全球对大数据的追逐的激情,企业家们相信 云端化、或是游戏化必将引领时代的潮流,股民投资者们也希望大数据能为他们指点迷津,研究人员希望建立更科学更见效的模型
我的书可以告诉出租车司机如何工作和选择客人,也能给网络婚介网站一点经营建议。但多数情况下,我们是无法处理庞杂无序的数据,拥有更多的信息并不意味着我们能更好地预测,也就是说我们并不能够对所有东西进行很精准的预测。Silver指出,事实上人们是可以非常擅长预测天气这类事物的,但特别不擅长预测股票价格,而恐怖袭击则是我们可以预测但却容易忽视了的事物。
Silver的回应估计让不少人失望了,他建议初创公司不妨先尝试进入一些竞争性较小的领域。企业可以探索一些还没有人涉足的领域,如果企业在这些领域拥有有效的数据,并可以提供相应的分析手段,那么可能会更容易获得成功。
事实上,sillver也是这样做的,他是少数最早发现棒球潜在的数据导向的人,他发现棒球比赛和总统大选都不是竞争激烈的领域,接着他用从网络博彩中赢回来的四十万美元创建了一个建模分析网站,专门用来预测MLB棒球运动员职业前景的,后来他把这网站卖给了Baseball Prospectus。
技巧和运气间存在着微妙而又模糊的关联。赢钱的时候是因为牌技好还是运气好?你永远也不知道。Silver指出,寻找那些可用的数据、但却从没有人拿这些数据进行过分析的领域,竞争更小才更容易成功,企业所有的收益,或者说所有的竞争优势,都是来自于边际收益。
看到这里,如果你非常羡慕Silver拥有这种超人能力,那不得不告诉你,不排除正是他的同性恋倾向才让他有了这般神通广大的预测能力,我总觉得自己是个局外人,我总是有不合群的观点。如果你从小就是同性恋,又或者你成长在一个相信不可知论但又笃信宗教的家庭,那你和一样,你也不愿意相信社会的主流信念。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
PyTorch 核心机制:损失函数与反向传播如何驱动模型进化 在深度学习的世界里,模型从 “一无所知” 到 “精准预测” 的蜕变,离 ...
2025-07-252025 年 CDA 数据分析师考纲焕新,引领行业人才新标准 在数字化浪潮奔涌向前的当下,数据已成为驱动各行业发展的核心要素。作为 ...
2025-07-25从数据到决策:CDA 数据分析师如何重塑职场竞争力与行业价值 在数字经济席卷全球的今天,数据已从 “辅助工具” 升级为 “核心资 ...
2025-07-25用 Power BI 制作地图热力图:基于经纬度数据的实践指南 在数据可视化领域,地图热力图凭借直观呈现地理数据分布密度的优势,成 ...
2025-07-24解析 insert into select 是否会锁表:原理、场景与应对策略 在数据库操作中,insert into select 是一种常用的批量数据插入语句 ...
2025-07-24CDA 数据分析师的工作范围解析 在数字化时代的浪潮下,数据已成为企业发展的核心资产之一。CDA(Certified Data Analyst)数据分 ...
2025-07-24从 CDA LEVEL II 考试题型看 Python 数据分析要点 在数据科学领域蓬勃发展的当下,CDA(Certified Data Analyst)认证成为众多从 ...
2025-07-23用 Python 开启数据分析之旅:从基础到实践的完整指南 在数据驱动决策的时代,数据分析已成为各行业不可或缺的核心能力。而 Pyt ...
2025-07-23鸢尾花判别分析:机器学习中的经典实践案例 在机器学习的世界里,有一个经典的数据集如同引路明灯,为无数初学者打开了模式识别 ...
2025-07-23解析 response.text 与 response.content 的核心区别 在网络数据请求与处理的场景中,开发者经常需要从服务器返回的响应中提取数 ...
2025-07-22解析神经网络中 Softmax 函数的核心作用 在神经网络的发展历程中,激活函数扮演着至关重要的角色,它们为网络赋予了非线性能力, ...
2025-07-22CDA数据分析师证书考取全攻略 一、了解 CDA 数据分析师认证 CDA 数据分析师认证是一套科学化、专业化、国际化的人才考核标准, ...
2025-07-22左偏态分布转正态分布:方法、原理与实践 左偏态分布转正态分布:方法、原理与实践 在统计分析、数据建模和科学研究中,正态分 ...
2025-07-22你是不是也经常刷到别人涨粉百万、带货千万,心里痒痒的,想着“我也试试”,结果三个月过去,粉丝不到1000,播放量惨不忍睹? ...
2025-07-21我是陈辉,一个创业十多年的企业主,前半段人生和“文字”紧紧绑在一起。从广告公司文案到品牌策划,再到自己开策划机构,我靠 ...
2025-07-21CDA 数据分析师的职业生涯规划:从入门到卓越的成长之路 在数字经济蓬勃发展的当下,数据已成为企业核心竞争力的重要来源,而 CD ...
2025-07-21MySQL执行计划中rows的计算逻辑:从原理到实践 MySQL 执行计划中 rows 的计算逻辑:从原理到实践 在 MySQL 数据库的查询优化中 ...
2025-07-21在AI渗透率超85%的2025年,企业生存之战就是数据之战,CDA认证已成为决定企业存续的生死线!据麦肯锡全球研究院数据显示,AI驱 ...
2025-07-2035岁焦虑像一把高悬的利刃,裁员潮、晋升无望、技能过时……当职场中年危机与数字化浪潮正面交锋,你是否发现: 简历投了10 ...
2025-07-20CDA 数据分析师报考条件详解与准备指南 在数据驱动决策的时代浪潮下,CDA 数据分析师认证愈发受到瞩目,成为众多有志投身数 ...
2025-07-18