
你,正在看这篇文章吗?
从你阅读的第一眼开始,你的网页浏览时间、IP位置、网页点击数、搜寻过的字眼、手机耗电量、信用卡消费记录,甚至今天是否去看牙医、公司大楼的电梯运转情况,所有没发生或在发生的事件都正被记录更新着;而且对于许多想了解你的他人或企业而言,你所留下的数据轨迹比起你本人,更能代表你。
千禧年之后,我们的数据社会开始了天翻地覆的巨变。当经济走到停滞之际,网络科技,却持续出现不停进化的机会与价值;如今要面对未来,个人与社会都不再处于被动与等待的姿态,很幸运地我们走到了这个时代,足以见证「大数据」对于「预测未来」的广泛影响,其中有乐观的想像与预期的讨论,也有反思与限制的深究;不一定要具科技专业背景或身处大规模企业,透过这篇文章俐落踏实的解释与探讨,轻易地就唤起我们对自身处境一点一滴的敏感度;而今年同事们在选书会议桌上所激起的各种意见与讨论,都表达出了我们确实深切地感受,数据知识与我们生活的连动性与新转变。
把时间转回2000年,当时全球数据有3/4仍是以纸张、胶卷与黑胶唱片等有形类比方式储存,其余1/4属于数位形式储存的数据;然而进展到2007年,全世界大约只剩下7%数据为类比形式,其他全为数位化数据!数据成长速度与转换之快,宣示全球正式迈入大数据的时代,我们不得不重新分析看待这些数据,数据量已从「量」发生「质」的改变,像是重获新生般,成为新商业生产塬料、以及重要的经济资源投入,进而创造出新形式的经济价值──当这些数据开始说话时,可以告诉我们的事情包罗万象,像是:
.可以知道机票何时买最划算。(出国旅行)
.亚马逊比你更早知道你喜欢哪本书。(网络购物)
.从汽车烤漆的颜色就知道这辆车的故障率高低。(买二手车)
.教师可以从某节课程被点阅的次数了解学生的问题所在。(网络教学)
.从Twitter上讯息的情感倾向来预测未来盘势。(投资操盘)
.Google将比公家卫生机关更早预测流感的爆发时间与地点。(掌握疫情)
.从追踪早产儿的生命徵象,预测是否会爆发感染。(新生儿健康)
事实就是,我们早已深陷在紧密交织的网状数据世界中。
开始拥抱杂乱、抛下成见,我们理解与探索世界的方式,将一步步改变
要坦然面对大数据的潮流,从数据提炼有意义的效用,首要就是必须抛下一些旧有的执着。开宗明义就为读者说明及温习叁种新思维:「样本等于母体」、「不求精准」,以及「不求因果」。前两项思维意味着,数据多比起品质好更重要。当能够拥有的数据已极大化,抽样的确就不再必要,更毋需锱铢计算精准,而有错过全貌的风险!一旦我们容忍且拥抱杂乱的数据,就会发现在西洋棋、文法校正上的电脑技术之所以有更多进展,是因为系统里有了更多残局应对与棋步分析的数据、及高达十亿的字汇输入量,这些数据远远胜过晶片技术或演算方法上的调整。
最后,也更为重要的思考逻辑,就是一切改由「相关性」来观察或作决策。以往「打破砂锅问到底」的坚持,也许不再那么合乎时宜,比如想知道机票票价,毋须想像航空公司定价策略;想知道什么商品会卖,也不用知道顾客口味喜好,只要将大数据交付相关分析,就能知道哪些指标能显示机票将上涨、顾客会买单。我们不需对某现象先提出具体假说,只要靠着相关性,能让研究结果减少偏见,我们对事物的观察也能更快、更清楚。
藉由预测模型与大数据的辅助,要成功不再困难
一旦改为数据导向来作决策,影响会非常深远,那些多半掺杂直觉、主观或个人猜测的理念想法,将可以藉由预测模型与大数据的辅助,预测究竟是否可行;如同电影《魔球》故事里比利跳脱出传统球探的评价方式,放胆改用充满数据分析新观点来经营球队,这些都指明了,想在职场上成功,需要的技能正在改变。如果需借助更多知识或经验进行判断,我们将多了数据作为最有验证力的老师,就算跨领域,照样可以提出最好的建议!世界出现越来越多公开分享的数据,其中蕴藏了不少价值金矿;如书中所阐述,从免费的政府的气象数据,结合企业航班数据,就能发现航班延误的相关天气数据,与直觉相反地,比起下雪航班更容易受到起雾影响而停飞!有想法的企业、组织、个人或是政府,只要愿意透过大数据思维来与世界互动,都更容易预见并掌握价值,创造出能唿应人性的创新;那些过去曾被认为是效率或既定的方式,也可能全面翻转。
然而,自由意志与数据独裁,究竟孰轻孰重?
眺望大数据的发展,似乎勾勒出科技统治一切的万能预示,这是否等于否定了人性的自由意志与人类潜能?大数据的黑暗面─那些我们可能遭遇到许多道德相关的议题,像是应该完全接受与个人意见相左的统计裁定吗?成功可预测,那么犯罪机率也可以喊贼先抓人吗?人永远是过去行为的囚徒吗?虽听来骇人,但预先思索有其必要性,毕竟时间不会停止,科技与数据发展仍继续无声的前进,现在并没有简单的方法,让所有人能够完全准备好迎接大数据世界;我们确实需要新的准则,让社会熟悉并准备,要如何使用这项科技,将决定了人类的种种机制与自身将朝哪个方向改变。只要心态与思维正确,我们依然能够巧妙的重复运用这些数据,不断带来创新和不同的服务。
大数据在这个时代诞生,是极为强大一种工具与资源,然而,它代表的是通知并非解释,是相关非因果。大数据的脉络与对社会、经济、科学与个人无所不在的影响,没有一厢情愿的乐观迷恋或盲目信仰,而是为我们目前处境解释、回溯过去我们所走的路,并针对前方种种危机与转机,提供指引。大数据时代下,人类自主掌握的空间与能力,因为科技而宽广深入,今年,我们肯定大数据揭示的重要价值,进而认识大数据的视角观点,或多或少地将我们生活、工作、思考与行动里可能有意义、有趣的交会点显影出来!这是场新挑战,更是个好机会,去作足准备、以最好的方式迎接未来。
本文来源:中国大数据
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
探秘 z-score:数据分析中的标准化利器 在数据的海洋中,面对形态各异、尺度不同的数据,如何找到一个通用的标准来衡量数据 ...
2025-06-26Excel 中为不同柱形设置独立背景(按数据分区)的方法详解 在数据分析与可视化呈现过程中,Excel 柱形图是展示数据的常用工 ...
2025-06-26CDA 数据分析师会被 AI 取代吗? 在当今数字化时代,数据的重要性日益凸显,数据分析师成为了众多企业不可或缺的角色 ...
2025-06-26CDA 数据分析师证书考取全攻略 在数字化浪潮汹涌的当下,数据已成为企业乃至整个社会发展的核心驱动力。数据分析师作 ...
2025-06-25人工智能在数据分析的应用场景 在数字化浪潮席卷全球的当下,数据以前所未有的速度增长,传统的数据分析方法逐渐难以满足海 ...
2025-06-25评估模型预测为正时的准确性 在机器学习与数据科学领域,模型预测的准确性是衡量其性能优劣的核心指标。尤其是当模型预测结 ...
2025-06-25CDA认证:数据时代的职业通行证 当海通证券的交易大厅里闪烁的屏幕实时跳动着市场数据,当苏州银行的数字金融部连夜部署新的风控 ...
2025-06-24金融行业的大数据变革:五大应用案例深度解析 在数字化浪潮中,金融行业正经历着深刻的变革,大数据技术的广泛应用 ...
2025-06-24Power Query 中实现移动加权平均的详细指南 在数据分析和处理中,移动加权平均是一种非常有用的计算方法,它能够根据不同数据 ...
2025-06-24数据驱动营销革命:解析数据分析在网络营销中的核心作用 在数字经济蓬勃发展的当下,网络营销已成为企业触达消费者 ...
2025-06-23随机森林模型与 OPLS-DA 的优缺点深度剖析 在数据分析与机器学习领域,随机森林模型与 OPLS-DA(正交偏最小二乘法判 ...
2025-06-23CDA 一级:开启数据分析师职业大门的钥匙 在数字化浪潮席卷全球的今天,数据已成为企业发展和决策的核心驱动力,数据分析师 ...
2025-06-23透视表内计算两个字段乘积的实用指南 在数据处理与分析的过程中,透视表凭借其强大的数据汇总和整理能力,成为了众多数据工 ...
2025-06-20CDA 一级考试备考时长全解析,助你高效备考 CDA(Certified Data Analyst)一级认证考试,作为数据分析师领域的重要资格认证, ...
2025-06-20统计学模型:解锁数据背后的规律与奥秘 在数据驱动决策的时代,统计学模型作为挖掘数据价值的核心工具,发挥着至关重要的作 ...
2025-06-20Logic 模型特征与选择应用:构建项目规划与评估的逻辑框架 在项目管理、政策制定以及社会服务等领域,Logic 模型(逻辑模型 ...
2025-06-19SPSS 中的 Mann-Kendall 检验:数据趋势与突变分析的利器 在数据分析的众多方法中,Mann-Kendall(MK)检验凭借其对数据分 ...
2025-06-19CDA 数据分析能力与 AI 的一体化发展关系:重塑数据驱动未来 在数字化浪潮奔涌的当下,数据已然成为企业乃至整个社会发展进 ...
2025-06-19CDA 干货分享:统计学的应用 在数据驱动业务发展的时代浪潮中,统计学作为数据分析的核心基石,发挥着无可替代的关键作用。 ...
2025-06-18CDA 精益业务数据分析:解锁企业增长新密码 在数字化浪潮席卷全球的当下,数据已然成为企业最具价值的资产之一。如何精准地 ...
2025-06-18