京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大科学开启大数据、大发现新时代
大科学是大数据的摇篮,大数据是大科学的产物
大科学的王者之道始于大数据的产生。人类历史上的大数据,源于科技领域,确切地说源于大科学研究。曼哈顿计划打开了微观世界,并开创了借用人造的大科学设施洞开微观世界的崭新科学方法论,以此为依托启动了一系列大科学计划,它们产生了史无前例的超大规模数据。如位于瑞士的欧洲核子研究中心、由全球逾8000位物理学家合作兴建的大型强子对撞机,2008年试运行后,数据量即达25PB/年,2020年建成后将达200PB/年,因此他们率先创建了“大数据”的概念。无独有偶,旨在测定人类基因组30亿碱基遗传密码的基因组计划,进行个体基因组测定时数据量即已高达13PB/年。而此计划后,学界受其鼓舞开展了一系列遗传背景迥异、不同疾病群体以及大量其他物种的基因组测序,数据量迅速逼近ZB级(是PB的百万倍),不约而同地创造了“大数据”概念。今天人们常用的互联网最初就是这些领域的科学家为解决海量数据传输而发明的。
人类理性对物质世界、人类社会和精神世界的认识,其最高境界是智慧。而要达此境界必然经过数据、信息、知识三个层阶,其中,数据是信息之母、知识之初、智慧之源。随着信息技术持续数十年的迅猛发展以及人类社会各行各业信息化的强力辐射,在人类纪元新千年的钟声敲响不久,文明世界就掀起了史无前例的大数据狂潮,其奔涌之疾,升腾之烈,不似海啸,胜似海啸。人们欢呼,因为它是摧枯拉朽、一往无前的狂飙,将以势不可挡的革命性力量,开辟新的天地;人们恐惧,因为它是行不由缰、漫无方向的野马,有着难以预想的破坏性力量。此时此刻,人类需要冷静,人类必须理性。
人类文明迄今经历了三次浪潮:第一次是农业革命,数千年前出现并持续数千年,释放出“物之力”;第二次是工业革命,数百年前出现并已持续数百年,释放出“能之力”;第三次是智业革命,数十年前开始孕育,目前正处初级阶段,将不断释放“智之力”。1980年,托夫勒预言了这次新起的文明,并明确指出这次文明将以信息化为标志。其后,恰如其料,技术与文明的信息化有如神助,在人类社会各领域、全球各地域甚至更广阔的空域天域似地火一般的点燃、普及。信息社会、信息文明似乎转眼间唾手即得,更有大数据时代的“即时”到来好像为此作了一目了然的注解。冷静分析,实则不然。数据是信息之母,没有数据,何来信息?缺乏数据的时代,怎能是名副其实的信息时代?而刚刚才来的大数据时代,恰恰表明此前是数据欠缺的“时代”。此前,人类发现、开辟的大量全新的数据空间,构建的超大型数据生产“工厂”、超大型数据仓库,建设的“信息高速公路”及其四通八达的网络,为大数据的涌现及其广泛辐射确实提供了充分的先决条件,但它们仅是大数据的摇篮,而不是摇篮里的婴儿。
从大数据向大信息升华,亟待统计科学与数据科学的革新
数据是信息之母,但再好的数据也不会自动生成信息。大数据得来不易,但转化为大信息更难,而不能转化为大信息的大数据就是横亘于人类认知之旅的理性黑洞、知性沙漠。实际上,人类理性跨过蒙昧之初,就拥有了将数据转换为信息的能力,这也是智人与直立人的分水岭。
然而,面对时下大数据时代奔涌的多元、多源、异构的海量数据,无论是被美誉为“孕育了现代科学”的统计科学,还是应大科学之运而生、当今正如日中天的数据科学,都还只能是望洋兴叹。今日之大数据,明日之大信息,扭转乾坤者,还属革新后的统计科学与数据科学。
信息虽然衍进自数据、珍贵于数据,但也只是其通向知识的中继站。知识,是人类理性认识世界的结晶,是改造世界的基石。培根在《伟大的复兴》中豪迈地预言:知识就是力量。大约400年后,人类终于迎来“知识经济时代”。知识经济,作为人类社会经济增长方式与经济发展的全新模式,被称为经济领域的哥白尼革命,其基本特征是:知识运营为经济增长方式、知识产业成为龙头产业、知识经济成为新的最活跃的经济形态。
由此可见,知识不仅是力量,而且是时代最核心、最强劲的先锋力量。但我们同时必须清醒地认识到:大数据与大知识,尚隔两重天,如将大数据比作洪水、比作奔流,它只有首先蒸发为大信息的气流,继而升腾为大知识的彩虹,才能气贯长虹、一飞冲天而成为引领知识经济时代的“巨龙”。
2015年大数据发展十大预测
1.结合智能计算的大数据分析成为热点,包括大数据与神经计算、深度学习、语义计算以及人工智能其他相关技术结合,成为大数据分析领域的热点。
2.数据科学带动多学科融合,但是数据科学作为新兴的学科,其学科基础问题体系尚不明朗,数据科学自身的发展尚未成体系。
3.跨学科领域交叉的数据融合分析与应用将成为今后大数据分析应用发展的重大趋势。
4.大数据将与物联网、移动互联、云计算、社会计算等热点技术领域相互交叉融合,产生很多综合性应用。
5.大数据多样化处理模式与软硬件基础设施逐步夯实。
6.大数据安全和隐私。
7.新的计算模式将取得突破。
8.各种可视化技术和工具提升大数据分析。
9.大数据技术课程体系建设和人才培养。
10.开源系统将成为大数据领域的主流技术和系统选择。
(资料来源:中国大数据技术大会发布的《2015大数据十大发展趋势预测》)
生命组学必将成为开启大发现新时代的领航者
毕达哥拉斯学派开启了科学的第一个大发现时代。他们集中证明:算术的本质是“绝对的不连续量”,音乐的本质是“相对的不连续量”,几何的本质是“静止的连续量”,天文学的本质是“运动的连续量”,终成“数即万物”学说。
基于第谷终身积累的海量数据,开普勒实现了对太阳系几乎所有天体运动规律的高度理论概括,因而被誉为“天空立法者”。同时期,伽利略亦通过大量观测,先后发现了运动的第一(匀速)、第二(匀加速)定律,被冠以“近代实验科学精神的创造者”。而开普勒、伽利略等的系列大发现,迅即催生了牛顿的集大成时代。一时间,牛顿力学统一了声学、光学、电磁学和热学,“万有”的牛顿定律几乎支配着小到超显微粒子、大到宇宙天体的整个物质世界。
20世纪是基因的大发现时代。1900年,孟德尔遗传定律重新发现;1910年,基因连锁定律发现;1944年证明遗传物质为DNA;1952年,DNA碱基组成定律发现;1953年DNA双螺旋模型问世,它洞开了万古遗传之谜及其遗传密码,进而揭示了统一万千生命世界的中心法则,并为人类基因组计划提供了理论与技术基础。
大科学研究,不仅开启了大数据时代,而且也光大了大发现时代。例如,人们通过大型强子对撞机,在不到5年的时间里,就实现了对“上帝粒子”(希格斯玻色子)的重大发现。希格斯玻色子的存在是最新一代大一统理论即“标准模型”的预言,而此模型是统一描述宇宙强力、弱力和电磁力这三种基本力及组成所有物质的基本粒子的理论,从而揭示了基本粒子为何拥有质量并演化为万事万物的“至理大道”,向人类破解宇宙诞生之谜迈进了一大步,因此在其发现的第二年,预言者即被授予诺贝尔奖。而此惊天大发现出自大设施、源于大科学、成于大数据、归于大智慧。它们预示着人类社会正在走向集大成的最伟大时代——智慧时代。正如莎士比亚所言:凡是过去,皆为序曲。人类的前程又到了一个新的转折点。
“人脑是自然界最复杂的系统,认知、意识、情感产生机理是自然科学的终极疆域,解读人脑成为国际科技竞争的巅峰战场”。2013年以来,集大科学、大数据、大发现之大成的“人类脑计划”相继在欧洲、北美洲、亚洲依次展开。就像曼哈顿计划、阿波罗计划开启了知识经济、信息社会、大数据时代一样,人类基因组、蛋白质组计划、脑计划正开启集大成的最伟大时代——智慧时代!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
【核心关键词】数据库、电商、知识、产品、数据产品、监管业务、产品经理、业务系统、用户行为分析、用户分析、数据分析、电商 ...
2026-06-16在 Python 动态类型与面向对象的编程体系中,变量定义与类实例化是构建代码逻辑的两大核心基石。变量是数据存储、传递与运算的基 ...
2026-06-16 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据和表结构数据有什么区别”“数据类型误判会引发哪些分析错误” ...
2026-06-16在 MySQL 查询性能优化体系中,索引是降低查询耗时、提升数据库吞吐的核心手段。其中联合索引与覆盖索引是实际开发中最高频的两 ...
2026-06-15在数据仓库建设与商业智能分析体系中,维度建模是应用最广泛的建模方法论,而事实表与维度表是维度建模的两大核心构件,共同构成 ...
2026-06-15 很多数据分析师能熟练计算指标,但当被问到“这家企业的核心业务目标是什么”“如何把模糊的战略目标拆解为可量化的指标”“ ...
2026-06-15在数据分析、业务监控、运营复盘等场景中,列值趋势计算是核心需求之一。无论是分析销售额的月度增长、用户活跃的变化趋势、库存 ...
2026-06-12在数字经济深度渗透的当下,消费者的购买行为已从过去的 “被动接受” 转变为 “主动决策”。流量红利消退、获客成本攀升、用户 ...
2026-06-12CDA三级认证是三个级别中的塔尖,全面考察数据战略、团队领导和复杂项目的综合能力。它所对应的《敏捷数据挖掘》教材,不再局限 ...
2026-06-12在游戏产业的商业逻辑中,付费玩家是支撑游戏生存与发展的核心支柱。行业普遍遵循 “二八定律”:20% 的付费玩家贡献了游戏 80% ...
2026-06-11【核心关键词】企业、定位、传统、产品、互联网、可视化、业务侧、数字化、结构化、数据分析、传统制造业、市场状态、发展空间 ...
2026-06-11 解读《CDA二级教材:量化策略分析(2025)》的全景结构与学习逻辑 ” CDA二级认证是企业招聘数据分析师时最常提及的证书门槛 ...
2026-06-11【核心关键词】药企、可视化、营销、分类、数据分析师、销售数据、业务人员、指导方向、分析报告、营销数据、营销医生 【专访摘 ...
2026-06-10在统计学分析、问卷调研、实验验证、业务复盘等场景中,卡方检验与 T 检验是应用最广泛的两类基础假设检验方法。前者专门处理分 ...
2026-06-10 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-06-10在MySQL数据库日常查询、数据统计、后台接口开发、数据导出等场景中,开发者经常需要查询数据表除某几列之外的所有字段。例如查 ...
2026-06-09在Python网络请求、爬虫开发、接口测试、数据抓取等实操场景中,requests库是最常用的第三方请求工具,而content属性是requests ...
2026-06-09 数据分析正在重塑每一个行业。CDA认证的三本官方教材,分别对应Level I、Level II、Level III,为你铺就从业务数据分析到数 ...
2026-06-09在数字财务、智慧财税、业财融合深度推进的当下,传统财务模式下数据标准混乱、业务流程碎片化、知识无法沉淀、系统互通性差等问 ...
2026-06-08随着数字经济深度渗透各行各业,数据正式成为继土地、劳动力、资本、技术之后的第五大生产要素,是企业数字化转型、精细化运营、 ...
2026-06-08