京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据与云计算的惊人相似之处
大数据强调非结构化数据的挖掘,云计算强调资源高效利用,一个面向业务应用,一个面向IT管理,不说风马不相及,但彼此交集并不多。
二者惊人相似之处并不在于内容,而在于其市场传播和导入过程,首先二者都是舶来品,其次在开始的时候,没有弄得明白它们是什么。
回想一下2~3年前,没有说得清楚云计算是什么?但有很多人会告诉你,云计算不是什么,不是虚拟化,不是绿色节能。大数据也是如此,很少有人说清楚4个V是什么?有的v连个准确的中文翻译都没有。
现在有很多告诉你,大数据不是数据大,大数据不是Hadoop,就是没有人愿意说大数据是什么?一句话,你说什么就是什么,可以说广义大数据、狭义大数据、机器大数据,也可以说行业大数据。
在云计算推广初期,从软件到硬件、从芯片到整机,从数据中心规划、设计到运维,人人都说自己是云计算,数据中心也被称为云计算数据中心。如今,类似事情恐要为大数据重演,服务器、存储、数据库都要在大数据分一杯羹。
为什么大数据有这样的魔力?因为和当初的云计算一样,大数据身上有一个标签:IT技术趋势和方向。有此标签,自是人人奋勇,各自当先。哪怕是为了政绩,也要有所作为。
所谓“空谈误事”,还是说点实在的。为此,我也求教了北京理工大学大数据搜索与挖掘实验室主任张华平博士。
“4个V不是大数据的定义,而是大数据的特征。大数据本质就是获取知识。”张华平说。
谈到大数据怎样获得,张博士表示,这都不是问题。大数据可以来自行业积累的数据,也可以一些专业的论坛和渠道。他强调,企业要重视数据积累,需要学会将管理行为数字化,例如邮件就是企业重要的数据。
“数据潜伏着知识,就需要通过大数据分析获得。”他说。
他表示,大数据应用是一个生态环境,有提供技术,有提供分析的,也有提供分析解读的。张博士所在的大数据搜索与挖掘实验室就是提供技术的,他们的ICTCLAS((Institute of Computing Technology, Chinese Lexical Analysis System,汉语词法分析系统)如今得到广泛使用,并承诺非商业化用途永远免费使用。
技术产品之外,张华平也在考虑推广使用的模式,一种不同于商业互联网的模式,一种付费使用的模式。未来可以考虑数据提交使用的模式。我们采集了大量的数据,仅微博的目标是100亿条的数据,几乎覆盖每个人。
大数据的解决之道
“数据不是多了,是少了,哪怕是错误的数据,也是有价值的数据。”他说。“知著、见微、晓意”是大数据的解决之道,有更多的数据等待我们去挖据其背后的知识。因此,像云计算一样,大数据并不遥远。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 题目1 一家餐厅统计顾客的性别、年龄、消费金额等信息,在进行数据分析时,发现性别这一变量在 ...
2026-10-16核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-16核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-16一、为什么要区分这两种分布 在数据分析和统计学中,拿到一组数据后第一件事通常就是看它的分布形态。分布形态决定了你能用什么 ...
2026-10-15一、问题现象 在实际使用 Excel 透视表做数据分析时,经常会遇到这样的情况:数据源表格里明明新增了一行或一列金额数据,数据源 ...
2026-10-15核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-15一、什么是预测式发货 预测式发货(Anticipatory Shipping)是亚马逊于2013年12月获得授权的一项美国专利(专利号 US 8,615,473 ...
2026-10-14一、SQL在金融量化体系中的定位 量化投资的本质是用数据驱动决策,而数据处理贯穿量化研究的全生命周期。从原始行情数据清洗、因 ...
2026-10-14核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-10-14CDA数据分析师 出品 作者:李诗怡 四层结构 · 零件与房子 · 六大易错点 一、什么是指标体系 定义:指标体系是整套完整框架 ...
2026-10-13写在开头 先还原一个你大概率见过的场面。 立项会上有人说:我们得做用户画像。 于是团队关进会议室,白板写满便利贴,两小时后 ...
2026-10-13 很多数据分析师每天都在计算指标、制作报表,但当被问到“什么叫指标数据元”“指标数据标准包含哪些核心维度”“指标数据质 ...
2026-10-13在统计学与数据分析研究中,相关性分析分为数值变量分析与分类变量分析两大类。针对身高、销量、分数等连续数值变量,通常采用皮 ...
2026-10-12在Power BI可视化分析体系中,常规表格仅能展示枯燥的数值数据,存在数据对比不直观、强弱规律不突出、维度交叉分析低效等问题。 ...
2026-10-12 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-10-12在传统零售行业同质化竞争激烈、大众营销转化率持续走低的背景下,依托经验与直觉的粗放式营销逐渐失效。美国塔吉特百货(Target ...
2026-10-10随着智能客服、数字化服务、用户精细化运营的快速普及,传统零散、非标准化的客户服务数据与业务体系逐渐难以支撑高效服务治理。 ...
2026-10-10 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-10-10CDA数据分析师 出品 作者:李诗怡 定义区别 · 场景举例 · 指标分类 · 计算方法 知识体系总览 模块 包含内容 一、核 ...
2026-10-09在数据分析工作流中,业务数据大多存储在各类关系型数据库内,例如MySQL、PostgreSQL、SQLite等。Pandas是Python生态中主流的数 ...
2026-10-09