京公网安备 11010802034615号
经营许可证编号:京B2-20210330
什么是“大数据”的真正含义_数据分析师
大数据是时下流行语,但它真正的意思是什么呢?是当数据成为大吗?
最近在波士顿举行的一个大数据和高性能计算峰会上,亚马逊网络服务(AWS)、大数据科学家JohnRauser提到一个简单的定义:任何超过了一台计算机处理能力的庞大数据量。
有人说这个定义过于简单化,有人认为一语道破大数据天机。
"大数据是最大的宣传技术、是最时髦的技术,当这种现象出现时,定义就变得很混乱。"一研究小组的发言人谈到。
"这一不成熟的市场,缺乏一个标准的定义"IDC研究公司业务分析部门的副总裁DanVesset说。但是,他也不是很赞同AWS的定义,"我想看得到的是真正的谈到数据,而不是用基础设备来处理数据。"他说。
其他人同意AWS的定义
"它可能不包含所有的信息,但我觉得大部分是正确的。"一个大数据分析师JeffKelly说。对大数据的一部分认知在于,它是如此之大,分析它需要多个工作负载,这是AWS的定义。"当你的技术达到极限时,也就是数据的极限。"Kelly说。
最常见定义大数据使用的三个术语都含有字母"V":volume,velocity和variety.许多数据公司、分析公司都会为围绕这个定义展开,如IBM、IDC。数量意味着生成和组织大量收集的数据;速度是指音频、视频、网络日志亦或更多的数据文本要进行收集和分析。
但也有一些人怀疑这一定义,Breen加了第四个"V":vendor。
如AWS和IBM的公司,他们对大数据的定义很大程度上是为了支持他们公司自身的产品。Breen说。
亚马逊发言人TeraRandall写道:"云提供即时的可扩展性和弹性服务,让您专注于分析,而不是基础设施建设。它增强你通过快速获取数据来处理和分析数据的能力。"Randall对数据的描述不见得是AWS的定义,但却是企业管理中经常会遇到的数据处理问题。
"大数据分析在云应用中是一个新兴的市场。"Kelly说。谷歌最近也发布了基于云的数据分析工具BigQuery。IBM则表示信息是"21世纪的石油"它推动业务决策跨不同行业而向前发展。
IDC称,大数据是一个很大的市场。IBM称,IDC预计到2015年企业将投资超过1200亿美元在基于数据业务分析的硬件、软件以及服务领域。IDC还表示:在整个IT和通信业务中,大数据的市场将增长7倍之多。
但是,IDC的研究人员Vesset说,大数据不是关于如何定义,最重要的是如何使用。最大的挑战在于哪些技术能更好的使用数据以及大数据的应用情况如何。这与传统的数据库相比,开源的大数据分析工具的如Hadoop的崛起,这些非结构化的数据服务的价值在哪里。
如何定义大数据到目前为止仍然没有具体的标准形态,也许,kelly的定义是最贴切的。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据透视表是数据分析中最常用、最高效的汇总分析工具,具备快速分组、聚合计算、维度拆解、数据可视化等优势,能够轻松完成求和 ...
2026-07-09在统计学、CDA数据分析、机器学习与商业数据研究中,正态分布是最基础、最重要的数据分布形态。绝大多数参数检验、数据建模、指 ...
2026-07-09 很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当 ...
2026-07-09【核心关键词】采购、周期、原材料、企业、产品、成本、要素、库存、供应商、数据分析、生产计划、生产制造、加工制造、技术工 ...
2026-07-08在数据分析、特征工程、机器学习建模的工作流程中,原始数据往往包含多个不同维度的数值指标,例如客户交易数据中的消费金额、交 ...
2026-07-08 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-07-08商业谈判是企业采购合作、渠道签约、价格议价、项目合作、客户签约的核心关键环节,直接决定企业的合作成本、利润空间与经营风险 ...
2026-07-07在数据分析、业务效果验证、AB 测试、学术研究等场景中,T 检验是假设检验体系里最基础、应用最广泛的统计方法,也是均值差异分 ...
2026-07-07 很多数据分析师每天都在写SQL,但当被问到“数据查询语言(DQL)的本质是什么”“SELECT语句中各子句的书写顺序与实际执行顺 ...
2026-07-07【核心关键词】转化率、企业、策略、岗位、互联网、拆分、产品、运营、分析师、指标体系、数据分析、用户画像、数据诊断、产品 ...
2026-07-06在数据分析工作中,文本数据处理是高频刚需场景,用户评论、客服工单、日志信息、调研问卷、商品文案等数据都包含大量文本内容。 ...
2026-07-06 很多数据分析师写过无数个SELECT查询,但当被问到“如何新建一张表来固化中间数据”“创建视图和创建物理表有什么区别”“视 ...
2026-07-06在 CDA 数据分析师能力体系中,透视分析是数据探索、多维度汇总、业务复盘的核心基础技能。无论是 Excel 数据透视表,还是 Power ...
2026-07-03在市场竞争日趋激烈、获客成本持续攀升的当下,企业粗放式的“广撒网”获客模式早已无法适配经营需求。企业经营的核心逻辑,已经 ...
2026-07-03 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-07-03【核心关键词】运营、企业、核心、客户、新技术、数字化运营、数据分析、传统企业、人工录入、生产系统、技术人员、数据安全、 ...
2026-07-02在产品开发、项目立项、业务拓展、运营优化的工作中,市场调查、竞品分析、需求调研是三大核心基础工作。很多从业者容易将三者混 ...
2026-07-02 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-07-02在MySQL数据库运维与开发工作中,当单表数据量达到千万级、亿级后,会出现查询卡顿、索引失效、写入性能下降等问题。为优化性能 ...
2026-07-01在信息化建设、系统开发、数据分析、需求梳理的工作场景中,业务模型与逻辑模型是两个最基础、也最容易混淆的核心概念。很多项目 ...
2026-07-01