京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据将改变人类解决问题的方式
哲学家康德在《纯粹理性批判》中提到,真理有分析真理和综合真理之分。简单而言,分析真理可以由逻辑论据推导出来,综合真理则需要经验证据和外部数据来证明。以往我们主要是通过分析方法来解决问题,首先建立模型和定律,然后通过逻辑推演出新的模型和定律。
Innovation Endeavors 的 Zavain Dar 提出,由于计算机系统和网络的发展,大数据崛起和 API 的蔓延将改变我们解决问题的方式。过去,我们是通过建立新颖的分析模型来推导出新发现,现在则变成了通过建设基础设施及能力,用综合化的手段去解决同样的问题。
他举例说,对于 web 排名这件事情,Google 的科学家的做法并不是通过页面和链接的关系推导出某种定理来用于更好地进行搜索,而是通过收集并综合之前的点击流和链接数据来预测未来用户希望看的东西。而 Amazon 也没有归纳出什么电子商务定律来指导了解谁将购买什么,而是通过历史的事件来优化未来的活动。
Google 和 Amazon 都是解决问题方式从分析向综合转移的早期例子,因为这两家公司的产品都是建立在数字化媒介当中的数据之上的。数据的创建、存储及用来与数据交互的接口都是数字化、自动化的。
但现在随着大数据的流行和 API 的普及,数据科学和基础设施方面的先驱已经通过建立高吞吐低时延的设施来获得渐进性、可预测的综合性创新和洞察,摒弃过去那种跃进式、但耗时长的分析性做法。
Dar 提出,要想把综合方法运用到新的领域,必须有两个基础:
1) 底层数据必须以数字化的形式存在
2) 从数据到科学家以及再从科学家返回到数据的过程必须自动化
也即整个输入输出的过程必须自动化。
从分析方法论转向综合方法论的转变其潜在意义将是巨大的。以往,这些方法局限在人工智能及信息获取等计算机科学子域,一切数字化以后,我们将不再需要预先设定的结构和公理这些知识性甚至哲学性的负担了,基础架构的普及就可以加速综合型问题解决的普及。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在统计调查与数据分析中,抽样方法分为简单随机抽样与复杂抽样两大类。简单随机抽样因样本均匀、计算简便,是基础的抽样方式,但 ...
2026-02-02在数据驱动企业发展的今天,“数据分析”已成为企业经营决策的核心支撑,但实践中,战略数据分析与业务数据分析两个概念常被混淆 ...
2026-02-02在数据驱动企业发展的今天,“数据分析”已成为企业经营决策的核心支撑,但实践中,战略数据分析与业务数据分析两个概念常被混淆 ...
2026-02-02B+树作为数据库索引的核心数据结构,其高效的查询、插入、删除性能,离不开节点间指针的合理设计。在日常学习和数据库开发中,很 ...
2026-01-30在数据库开发中,UUID(通用唯一识别码)是生成唯一主键、唯一标识的常用方式,其标准格式包含4个短横线(如550e8400-e29b-41d4- ...
2026-01-30商业数据分析的价值落地,离不开标准化、系统化的总体流程作为支撑;而CDA(Certified Data Analyst)数据分析师,作为经过系统 ...
2026-01-30在数据分析、质量控制、科研实验等场景中,数据波动性(离散程度)的精准衡量是判断数据可靠性、稳定性的核心环节。标准差(Stan ...
2026-01-29在数据分析、质量检测、科研实验等领域,判断数据间是否存在本质差异是核心需求,而t检验、F检验是实现这一目标的经典统计方法。 ...
2026-01-29统计制图(数据可视化)是数据分析的核心呈现载体,它将抽象的数据转化为直观的图表、图形,让数据规律、业务差异与潜在问题一目 ...
2026-01-29箱线图(Box Plot)作为数据分布可视化的核心工具,能清晰呈现数据的中位数、四分位数、异常值等关键统计特征,广泛应用于数据分 ...
2026-01-28在回归分析、机器学习建模等数据分析场景中,多重共线性是高频数据问题——当多个自变量间存在较强的线性关联时,会导致模型系数 ...
2026-01-28数据分析的价值落地,离不开科学方法的支撑。六种核心分析方法——描述性分析、诊断性分析、预测性分析、规范性分析、对比分析、 ...
2026-01-28在机器学习与数据分析领域,特征是连接数据与模型的核心载体,而特征重要性分析则是挖掘数据价值、优化模型性能、赋能业务决策的 ...
2026-01-27关联分析是数据挖掘领域中挖掘数据间潜在关联关系的经典方法,广泛应用于零售购物篮分析、电商推荐、用户行为路径挖掘等场景。而 ...
2026-01-27数据分析的基础范式,是支撑数据工作从“零散操作”走向“标准化落地”的核心方法论框架,它定义了数据分析的核心逻辑、流程与目 ...
2026-01-27在数据分析、后端开发、业务运维等工作中,SQL语句是操作数据库的核心工具。面对复杂的表结构、多表关联逻辑及灵活的查询需求, ...
2026-01-26支持向量机(SVM)作为机器学习中经典的分类算法,凭借其在小样本、高维数据场景下的优异泛化能力,被广泛应用于图像识别、文本 ...
2026-01-26在数字化浪潮下,数据分析已成为企业决策的核心支撑,而CDA数据分析师作为标准化、专业化的数据人才代表,正逐步成为连接数据资 ...
2026-01-26数据分析的核心价值在于用数据驱动决策,而指标作为数据的“载体”,其选取的合理性直接决定分析结果的有效性。选对指标能精准定 ...
2026-01-23在MySQL查询编写中,我们习惯按“SELECT → FROM → WHERE → ORDER BY”的语法顺序组织语句,直觉上认为代码顺序即执行顺序。但 ...
2026-01-23