京公网安备 11010802034615号
经营许可证编号:京B2-20210330
《大数据时代》作者、牛津大学教授维克托.迈尔.舍恩伯格(ViktorMayer-Schönberger),今天在2014浦江创新论坛上发表了大数据工业4.0主题演讲。
舍恩伯格认为,世界的本质就是大数据,大数据正在开启重大的时代转型。大数据正在改变的的生活以及理解世界的方式,正在成为新发明和新服务的源泉。从因果关系到相关关系的思维变革,正是大数据的关键,建立在相关关系分析法基础上的预测才是大数据的核心。
其主体演讲内容整如下,有部分删节。
当我们谈大数据以及创新的背景时,追溯到百年前,亨利福特催生了当时的福特车型,启动了汽车的大众生产新时代。这不但改变了汽车制造业,改变了经 济,同时也改变了整个社会,改变了我们对距离和时空的感受感觉。之前,我们有亨利福特以及他的福特车型,而现在,我们有苹果手表即将上市。
在这样的背景下,如何定义创新?福特车型主要是与大众生产有关,就某一个车型进行最低成本的批量型生产。快进到现在的时代,苹果手表将会有上千种不同的配置,而且以低成本进行生产,既可以单纯大众生产,还可以进行个性化大众生产。
个性化大众生产,成为现代化的标志。再说创新,我们看到是从大众车型生产到个性化大众生产的时代,我们对本身的想法进行了否定。实际上,创新是 更好地对世界上发生的事情进行数据技术分析和理解。在人类发展当中,通过理解和观察做到创新,并且通过观察捕捉信息从而加深理解。
最近我们开始谈及小数据,因为收集、分析、储备、再使用数据成本非常高昂而耗费时间。现在我们看到要理解世界的方式和方法,是基于我们对于大数据无法正确理解而驱动的,这样的背景正在变化。
一、大数据带给我们对现实的新体验
我们收集分析储蓄数据,再改变数据分析的过程,改变了我们对世界进行理解的方式。从1989年到2010年这20年时间,全球数据的数量增长了 100倍,我们看到数据的爆炸性增长,我们从模拟世界进展到了数码世界或曰数字世界。为什么是这样?因为数量能够转化为质量。譬如我们拍数码照片,每一秒 钟一个人骑马的照片,如果连拍20张照片,可以突然看到数量的改变带来新的质量飞跃,这就是我们对现实的新的观察和体验,这就是数据所带来的改变,信息数 量增长,可以带来我们对世界洞察力新的变革。
二、大数据帮助我们更好理解世界
数据和与之相关的问题,是我们观察世界的出发点。换言之,要让数据说话,让数据来帮助人们看世界,让数据帮助我们更好地理解世界。譬如在拍照时必须 做焦点的选择,哪些是最重要的要作为焦点,而不重要变为模糊的背景?这时,我们会知道在数据时代什么对我们更重要。使用大数据相机拍摄,可以把所有的焦点 重心捕捉起来,在拍完照片之后,可以自己选择任何一个成为焦点的对象。大数据照相机的优点、力量所在,正是可以让数据说话,把互不关联的数据结合起来。通 过分析这些数据间的关系和关联,你可以找出一个事件的因果关系。
三、大数据创新改变生活的方方面面
上世纪50年代,美国国防部想让科学家打造一个软件,能够自动把俄文翻成英文,这个项目最后花费了10亿美金、以及15年时间,最后以失败而告终。 而现在加利福尼亚一个创业公司,利用因特网作为基础,创建统计性、或然性,打造出成功的翻译机器。利用大数据创新后的结果,比以前所有的对机器翻译的研究 都更加出色。
在健康领域,有一位博士利用大数据把数字传感器放到了早产儿身上,然后收集那些与他的生命体征非常相关的关键信息,包括他的血压、心跳数量,大概在 一秒钟内可传递1200多项相关的数据。假以时日,他们开始寻找这些数据所带来的模式和规律,通过这些模式和规律来预测这个孩子未来可能遭遇到的感染、与 之相关的疾病,从而帮助医护人员给早产儿更好的医疗护理。
四、重复使用数据以获取更大的价值
大数据的创新里蕴含有非常多的价值,但最重要的是可以在那些已经用过的数据里获取更大的价值。以前,我们根据数据的用处使用它,用完后把数据丢弃。 但是现在不是这样:我们要把数据一遍遍重复使用,像一座冰山,我们看到的只是冰山一角,数据最重要的价值都隐藏在我们看不见的海水下面。
美国西雅图创投公司重复使用数据,帮助人们在上下班的路上躲开交通堵塞区域。他们有APP(即应用),称之为热图,根据交通堵塞的不同情况显示不同 的颜色,每天都有1亿人在使用这个应用。这个数据从哪里来?每一个智能手机的用户,都是一个传感器,当你在行走或开车时,智能手机已把数据传输出去了,计 算你走在哪条路最佳。这些数据可进行重复,公共部门利用这些数据,可以更好了解公共交通状况。
罗罗公司(即劳斯莱斯),很长时间内都是为飞机提供引擎的,引擎上的传感器留下了很多数据,这些数据本来用后即弃,但现在,他们把这些数据重新整 理,可准备预测引擎里面哪一个零部件即将产生故障,根据预测结果可以提早进行维修和零件替换。所以,这个公司服务板块成长很快,服务创已占到营收总额的 17%。
多林格公司,开发了学习英语的智能手机应用。他们把所有的数据收集起来,发现分析人们学习英语时使用的各种方法,比如西班牙人学习英语的方法与中国 人学习方法不一样。他们使用了云计算服务,不需要很高成本,不需要建设生产制造商基地,不需要建立工厂,也不需要建立谷歌数据库那么大规模的数据库。
在现代世界里,物理规模已经不是那么重要,重要的是要有能力收集数据,有能力分析数据,从数据当中得出点子。
五、以谦逊、人性化的态度分析大数据
大数据的下一个趋势是什么?有了大数据之后,在未来我们肯定能够学的更多,我们也会变得更健康,寿命会延长,汽车会不需要司机但是,大数据显而 易见也有限制,在下一步我们一定要非常当心,以一种非常审慎的态度掌握大数据技术。非常重要的一点是,我们一定从大数据当中进行不断学习。
另外我们应专注于对人类有益的领域,这就是人和电脑之间的差异。我们应更加谦逊,谦逊是非常好的特质。数据经常是不完整、不完美的,我们做大数据分析时,不仅仅是用谦逊的态度去做,而且要以人性化态度分析大数据。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据分析、质量控制、科研实验等场景中,数据波动性(离散程度)的精准衡量是判断数据可靠性、稳定性的核心环节。标准差(Stan ...
2026-01-29在数据分析、质量检测、科研实验等领域,判断数据间是否存在本质差异是核心需求,而t检验、F检验是实现这一目标的经典统计方法。 ...
2026-01-29统计制图(数据可视化)是数据分析的核心呈现载体,它将抽象的数据转化为直观的图表、图形,让数据规律、业务差异与潜在问题一目 ...
2026-01-29箱线图(Box Plot)作为数据分布可视化的核心工具,能清晰呈现数据的中位数、四分位数、异常值等关键统计特征,广泛应用于数据分 ...
2026-01-28在回归分析、机器学习建模等数据分析场景中,多重共线性是高频数据问题——当多个自变量间存在较强的线性关联时,会导致模型系数 ...
2026-01-28数据分析的价值落地,离不开科学方法的支撑。六种核心分析方法——描述性分析、诊断性分析、预测性分析、规范性分析、对比分析、 ...
2026-01-28在机器学习与数据分析领域,特征是连接数据与模型的核心载体,而特征重要性分析则是挖掘数据价值、优化模型性能、赋能业务决策的 ...
2026-01-27关联分析是数据挖掘领域中挖掘数据间潜在关联关系的经典方法,广泛应用于零售购物篮分析、电商推荐、用户行为路径挖掘等场景。而 ...
2026-01-27数据分析的基础范式,是支撑数据工作从“零散操作”走向“标准化落地”的核心方法论框架,它定义了数据分析的核心逻辑、流程与目 ...
2026-01-27在数据分析、后端开发、业务运维等工作中,SQL语句是操作数据库的核心工具。面对复杂的表结构、多表关联逻辑及灵活的查询需求, ...
2026-01-26支持向量机(SVM)作为机器学习中经典的分类算法,凭借其在小样本、高维数据场景下的优异泛化能力,被广泛应用于图像识别、文本 ...
2026-01-26在数字化浪潮下,数据分析已成为企业决策的核心支撑,而CDA数据分析师作为标准化、专业化的数据人才代表,正逐步成为连接数据资 ...
2026-01-26数据分析的核心价值在于用数据驱动决策,而指标作为数据的“载体”,其选取的合理性直接决定分析结果的有效性。选对指标能精准定 ...
2026-01-23在MySQL查询编写中,我们习惯按“SELECT → FROM → WHERE → ORDER BY”的语法顺序组织语句,直觉上认为代码顺序即执行顺序。但 ...
2026-01-23数字化转型已从企业“可选项”升级为“必答题”,其核心本质是通过数据驱动业务重构、流程优化与模式创新,实现从传统运营向智能 ...
2026-01-23CDA持证人已遍布在世界范围各行各业,包括世界500强企业、顶尖科技独角兽、大型金融机构、国企事业单位、国家行政机关等等,“CDA数据分析师”人才队伍遵守着CDA职业道德准则,发挥着专业技能,已成为支撑科技发展的核心力量。 ...
2026-01-22在数字化时代,企业积累的海量数据如同散落的珍珠,而数据模型就是串联这些珍珠的线——它并非简单的数据集合,而是对现实业务场 ...
2026-01-22在数字化运营场景中,用户每一次点击、浏览、交互都构成了行为轨迹,这些轨迹交织成海量的用户行为路径。但并非所有路径都具备业 ...
2026-01-22在数字化时代,企业数据资产的价值持续攀升,数据安全已从“合规底线”升级为“生存红线”。企业数据安全管理方法论以“战略引领 ...
2026-01-22在SQL数据分析与业务查询中,日期数据是高频处理对象——订单创建时间、用户注册日期、数据统计周期等场景,都需对日期进行格式 ...
2026-01-21