大数据正在改变你我_数据分析师
大数据、人工智能、云计算,这些原本听起来离大众生活非常遥远的IT专业术语,如今正实实在在地改变着人们的生活。到底什么是大数据?它以何种方式影响我们的生活?
大数据正在做什么
以开放、平等、参与的方式重构商业模式和人的行为方式
如今,喜欢在互联网上购买书籍的人会发现,当你搜索某一本书时,常常会同时在页面上看到一个推荐书单,而你会惊奇地发现,书单里罗列的,正是你感兴趣的书籍。这并非书商的神机妙算,也并不借助于专家学者的推荐,隐藏在它背后的,只是一串串数据——海量的巨细无遗的大数据。这些数据记录了过去若干年来,数以千万计的人每一天的买书行为,以致它清楚地知道买这本书的人通常还会买哪些书。
通过这种大数据的洞察力建立的新的价值点,亚马逊在美国轻而易举地击退了他们的传统竞争对手。在互联网时代,像这样以大数据驱动的行业变革非常之多,并正在悄然改变着我们的生活。
在教育领域,面对面的传统授课方法正面临着在线教育的冲击,慕客课堂也正在构建新的教育模式;在服务业领域,传统的营销方式正在被基于大数据的精准、个性化的服务所取代。
大数据所做的,就是将其背后的人与人、信息与信息,信息与商品、人与商品连接起来,将人的需求同各种各样的以信息为基础的东西连接起来,以开放、平等、参与的方式在重构商业模式和人的行为方式。
在这种新技术构建的地基上,人们未来将可能借此探讨一些惊人的课题,比如人的“意识数据化”——把人的意识放到网上,让它在数据云里阅读、学习;再比如“人体工程”——借助当下生物技术和信息科技,可以让人的长相、智力、情感都顺从自己的心意。
如果将传统的生产工具比作小米加步枪的话,未来基于大数据的新生产工具无异于加农炮。信息在未来将扮演极其重要的角色,这意味着人们需要调整视角,把数据这个最重要的资源,很好地用起来。当一个市长以大数据的眼光看待一个城市,他可能让城市从民生角度、经济角度、社会管理角度收集各种数据,在此基础上去了解城市的交通、医疗卫生等各种相关事项,发现哪里有问题,哪里可改善,应该如何调整。
如何分析大数据
靠无数台计算机,通过数学模式将数据分解、合并直至得到结果
所谓大数据,就是以前所未有的方式,在海量规模数据中寻找到新看法、新趋势,然后构建崭新的价值。
过去,人们不曾获得如此大规模的数据,所以根本无法获得如今大数据所能得出的结论和价值。如何分析海量数据呢?其实,方法跟曹冲称象差不多,一头大象,一杆秤称不了,同样,一台机器也无法处理海量的数据。
大数据处理不是靠一台超级计算机,而是靠无数台计算机,用函数式编程这样的数据工具将其分解,再慢慢合并最后拿出结果。以搜索引擎为例,他们在做三件事——搜集数据、深度加工数据、将结果提供给用户。每天,超过100万台计算机在运行,处理的数据规模在P级别(千万亿字节),相当于一份报纸60年所有文字图片数据总和的1000倍以上。当人们用关键词搜索的时候,它消耗掉的电能,能帮你煮热一杯咖啡。
大数据最厉害的地方,是开辟了崭新的业务模式,就是数据化、智能化、互联网化。要掌握这样一种新的工具,就要以大数据为基础看待处理和运用数据的方式,这跟过去小数据的集合迥然不同——
第一,大数据强调全数据的观念,而非小数据的随机抽样。小数据,只要记住关键信息就行,大数据需要采集全部信息。第二,小数据强调精准,大数据强调大势的把握和概率;第三,小数据关注因和果,大数据则关注关联。比如一家网站向读者推荐图书时,不需要操心人们为何买这本书,它所做的是采集所有买书人的数据,然后用数学模型分析出买这本书的人购买其他书籍的概率。
物联网、传感器、机器人、三维打印、可穿戴设备,所有这些新兴热门技术的背后,都有大数据的支撑。大数据时代对生产关系的构建,不亚于人们从农业时代向工业时代的迁徙。
大数据的未来
人的情绪和想象力能否靠大数据模拟,依然未知
如果说大数据是一顶皇冠,皇冠上的明珠就是人工智能。
什么叫人工智能?怎么定义、衡量人工智能?以著名的图灵测试为例——在墙后面,有一个人和一台计算机,如果人与之交流后,无法分辨出,哪个是人,哪个是计算机,则可以认为这台计算机达到了人工智能的程度。可见,人工智能所关联的,不仅是知识储备,也涉及到模拟人类的情感、想象力和创造性。
人们不禁要问,如果有一天,大数据技术拥有了更高级的信息收集、分析、判断能力,也掌握了人类的创造力、想象力和个人情感,那么作为万物之灵的人类与人工智能机器的区别将如何体现?人类的特性会消失吗?
事实上,这一天目前来看还太遥远,即使是大数据也并不可能预测太久以后的未来。大脑作为人类各种思维的物质基础,大脑皮质更多负责理性思考,小脑则负责较原始的欲望和情绪。当前,科学家对大脑皮质的工作原理已经研究得相当深入,通过计算机系统的模拟,已经初见成效。比如,计算机对视觉系统、声音系统、文字符号为中心的语言系统的理解,已经达到一定的高度。但截至目前,对负责个人情感等活动的小脑,大数据技术还没有深入探索。
更何况,世界上本来就有相当一部分问题无法用数学求解。如果无法用已掌握的数学工具分析、解释,那么人们就无法用大数据去做这部分工作。所以,人的情绪、创造力、想象力在一定程度上也许会被解码,但完全解码的可能性现在看来依旧是个未知数。
在很多科幻作品里我们看到,具有人工智能的机器将来会统治人类。但我们其实不必太担心,因为正是人类的创造力,在推动科技一步步向前走。我们也许应当以双赢的观念,来看待人类与智能机器的关系——互补、融合。到那时候,人工智能机器将帮助人类超越自身局限,使人们的力量更强大,成为我们无处不在的助理。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据分析在当今信息时代发挥着重要作用。单因素方差分析(One-Way ANOVA)是一种关键的统计方法,用于比较三个或更多独立样本组 ...
2025-04-25CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-25在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-24以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《刘静:10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda ...
2025-04-23大咖简介: 刘凯,CDA大咖汇特邀讲师,DAMA中国分会理事,香港金管局特聘数据管理专家,拥有丰富的行业经验。本文将从数据要素 ...
2025-04-22CDA持证人简介 刘伟,美国 NAU 大学计算机信息技术硕士, CDA数据分析师三级持证人,现任职于江苏宝应农商银行数据治理岗。 学 ...
2025-04-21持证人简介:贺渲雯 ,CDA 数据分析师一级持证人,互联网行业数据分析师 今天我将为大家带来一个关于用户私域用户质量数据分析 ...
2025-04-18一、CDA持证人介绍 在数字化浪潮席卷商业领域的当下,数据分析已成为企业发展的关键驱动力。为助力大家深入了解数据分析在电商行 ...
2025-04-17CDA持证人简介:居瑜 ,CDA一级持证人,国企财务经理,13年财务管理运营经验,在数据分析实践方面积累了丰富的行业经验。 一、 ...
2025-04-16持证人简介: CDA持证人刘凌峰,CDA L1持证人,微软认证讲师(MCT)金山办公最有价值专家(KVP),工信部高级项目管理师,拥有 ...
2025-04-15持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。在实际生活中,我们可能会 ...
2025-04-14在 Python 编程学习与实践中,Anaconda 是一款极为重要的工具。它作为一个开源的 Python 发行版本,集成了众多常用的科学计算库 ...
2025-04-14随着大数据时代的深入发展,数据运营成为企业不可或缺的岗位之一。这个职位的核心是通过收集、整理和分析数据,帮助企业做出科 ...
2025-04-11持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。 本次分享我将以教培行业为 ...
2025-04-11近日《2025中国城市长租市场发展蓝皮书》(下称《蓝皮书》)正式发布。《蓝皮书》指出,当前我国城市住房正经历从“增量扩张”向 ...
2025-04-10在数字化时代的浪潮中,数据已经成为企业决策和运营的核心。每一位客户,每一次交易,都承载着丰富的信息和价值。 如何在海量客 ...
2025-04-09数据是数字化的基础。随着工业4.0的推进,企业生产运作过程中的在线数据变得更加丰富;而互联网、新零售等C端应用的丰富多彩,产 ...
2025-04-094月7日,美国关税政策对全球金融市场的冲击仍在肆虐,周一亚市早盘,美股股指、原油期货、加密货币、贵金属等资产齐齐重挫,市场 ...
2025-04-08背景 3月26日,科技圈迎来一则重磅消息,苹果公司宣布向浙江大学捐赠 3000 万元人民币,用于支持编程教育。 这一举措并非偶然, ...
2025-04-07在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03