京公网安备 11010802034615号
经营许可证编号:京B2-20210330
如果要用一句话来说明大数据(big data)的价值,那就是「整体大于部分的总和」。单独看来觉得琐碎平凡的资料,汇总起来经过各种演算法的分析,可以展现从资料的任一部分都看不出来的高价值面貌。
先举个不巨量、但发生在你自己身上的例子:知觉。
在a右图中,你可以约略看到一个圆。但是当你单独检视那叁个棕色的区域,你是看不到圆形的。那个圆,只在整体的层次可以看到。
再举个真正巨量、也发生在你自己身上的例子:人脑。人脑由一百亿个神经元与一百兆个连结组成。每个神经元就做一件简单的事:激发或不激发。一百亿个简单的 0 与 1 状态由一百兆个连结组织起来,展现出各种复杂的认知与情感能力。这些能力是在个别神经元或连结上看不到的。
大数据的应用也展现出同样的特性。利用现代资讯技术将单独的资料点汇总成为规模超大的资料库,再藉由人工智慧演算法的分析,让人们可以发现只能在整体层次看到的规律性、相关性与改变趋势。
这样的预测力不会只存在于整体层次。只要透过设计,还可以回到个体层次,带来更能够满足人们需求的产品、服务、环境与政策,改善使用者经验,提升人们的生活品质。
美中不足之处是分析大数据的演算法在还是个黑箱。我学过人工智慧,也做过语料库语言学与自然语言处理的研究,有些地方大约可以猜测是怎麽分析的。但如果作者能以一两个例子解说能够做到这些了不起的事情的演算法有什麽特性,会更满足我的好奇心,也更能促进一般读者的理解。
最后,回到你的身上。如果你能把一生中每分每秒所听所见所做鉅细靡遗记录下来,也是一种大数据。你的大脑做不到(记忆琐碎且无关联的细节不是大脑的强项),但科技做得到。以现代的科技来看,储存空间不是大问题。关键同样在分析的方式。
七十九岁的微软研究员Gordon Bell就把他长达十余年的亲身实验经验,包括记录与分析的工具,算是个人大数据的开端。相信再过不久,每个人都能拥有完整的数位记忆,而分析这些大数据则可以帮助我们更了解自己是一个什麽样的人,非常可能比我们自以为了解的更准确。
本文转自:中国大数据
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 多表进阶与 DDL/DML 连接 · 子查询 · 合并 · 建表与书写规范 ” 三、DQL 多表进阶:连 ...
2026-11-20 前面讲了怎么搭指标体系,但很多团队卡在最后一步:高层定了一个漂亮的目标,往下一层层写进周报,最后却落不到任何人的具体 ...
2026-11-20 很多团队做数据分析的现状是:老板要一个数就拉一个数,周报里堆满了 GMV、DAU、转化率,却没人说得清这些数之间是什么关系 ...
2026-11-20这周你大概又经历过一次:报表自己跑了,SQL 让 AI 写了,连周报初稿都不用自己动手。你一边松口气,一边心里发慌——那我还剩什 ...
2026-11-20 做产品立项、写商业计划书、规划市场进入策略时,"市场调研"和"竞品分析"几乎总是被绑在一起说,甚至被当成同一件事。但实际 ...
2026-11-19 在做数据治理、搭数据中台或者梳理数据库表结构时,"主数据"和"参考数据"是被提及频率最高、也最容易被混为一谈的两个概念。 ...
2026-11-19“纲举目张,执本末从。”若想在数据分析领域有所收获,一套合适的学习教材至关重要。一套优质且契合需求的学习教材无疑是那关键 ...
2026-11-19一、什么是本体 在知识图谱和语义建模里,本体(Ontology)是对一个领域内概念、属性、关系和实例的形式化描述。它回答三个问题 ...
2026-11-18一、K-S 曲线解决什么问题 风控评分卡、客户流失模型、欺诈识别模型建好之后,最核心的一个问题是:模型能不能把"会变坏"和"不会 ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18产品上线之后,真正回答"用户是谁、想要什么、卡在哪里"的,往往不是调研问卷,而是用户留下的一条条行为记录。点击、浏览、停留 ...
2026-11-17在日常数据库开发与报表查询中,日期格式几乎是最高频的"打交道"对象:页面上要展示 yyyy-MM-dd,接口要返回 ISO 8601 字符串, ...
2026-11-17核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-17一、销售行业为什么离不开大数据分析 销售行业的本质是"把合适的产品,在合适的时间,卖给合适的人,并持续复购"。传统销售靠经 ...
2026-11-16一、什么是频数分布 拿到一批连续数据(员工年龄、商品价格、考试分数、订单金额),最想先看的往往不是平均值,而是数据集中在 ...
2026-11-16教育部办公厅关于成立全国数据职业教育教学指导委员会(2026—2030年)的通知 教职成厅函〔2026〕25号 各省、自治区、直辖市教 ...
2026-11-16CDA数据分析师 出品 作者:李诗怡 基础与单表查询 四大类语言 · 数据库基础 · DQL 单表查询 ” 一、SQL 四大类语言与数据 ...
2026-11-13核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-13一、问题从哪来 财务分析里算增长率,常规公式所有人都会写: 增长率本年数上年数上年数 这个公式在"上年为正"时完全成立。但一 ...
2026-11-12