京公网安备 11010802034615号
经营许可证编号:京B2-20210330
专家给大数据“泼冷水 ”:中国大数据仍在初级阶段
大数据成为时代的新宠儿,不知情的人以为,中国大数据已经发展的差不多了,在专家眼里,大数据还处在初级阶段,出现的许多问题都亟待解决,大数据还要再迈过几道坎儿。“我国意识到大数据的价值,并不比欧美晚,但并没有很好的大数据应用。”大数据运用还在法外“裸奔”,这都是大数据要...

“不少人以为,大数据技术很成熟了,甚至说大数据是万能的。”近日,在“中关村大数据日”上,西安交通大学数学与统计学教授徐宗本院士说,“大数据具有大价值,但也有大忽悠的一面。”在接受记者专访时,数据堂合伙人柴银辉认为,“大数据就像5年前的云,还处于初级阶段,还需要跨过几道坎。在这个过程中,要谨防泡沫出现”。
数据无差别存储:想要应用成本要降万倍左右
“数据无差别存储,使用起来成本太高。”柴银辉估计,“这些数据想要应用,成本要降到万倍左右。”
目前,很多人把“大数据”等同于“数据大”。在柴银辉看来,“分类存储的数据才能产生价值”。
对大数据拥有者进行分析,柴银辉认为,前景并不乐观。“大家说政府掌握数据,但很多部门只是把文件堆在那里,甚至没有数据库。国企有数据,却不知该怎么存放。无差别存储的数据,很难产生价值。”
柴银辉认为,大数据想要应用,就要经历全、新、细、准四个阶段,但目前很多数据还没完成第一个阶段。
“我国意识到大数据的价值,并不比欧美晚,但并没有很好的大数据应用。”电子科技大学教授周涛曾经分析,其中一个重要原因,是拥有大数据的人、拥有大数据分析技术的人、拥有数据分析需求的人是分离的。
他举例说明,比如遥感、水利、水文数据,如果国家不能有效管理起来,就没法产生价值,反而是一个巨大的负担。
技术上并不成熟:新分析方法还没出现
“不少人觉得,大数据技术很成熟了。”徐宗本说,这其实是一个误区。
徐宗本从处理和分析的区别入手加以说明:“我们想做一个简单统计,做一个查询,做一个排序,做一个比对,等等,这叫数据处理。它是用计算机的标准逻辑一步过的处理方式。而数据中有没有趋势、有没有共性结构、有没有关联数据,这些叫数据分析。”
为了更便于理解,徐宗本举了一个例子:“在这间屋子里,找出谁个子最高,这是处理,但找谁和谁关系最好,这叫分析。”
但在现实社会里,很多人把两者混为一谈。这也造成了他们对大数据技术的误读。徐宗本认为,大数据的成功是部分处理技术的成功。现有例子对于分析而言,基本还是传统方法,新方法并没有出现。
硬蛋首席技术官李世鹏告诉记者:“我们在做智能硬件孵化时发现,对于供应商和创业者需求的精准分析,大数据还需要进一步成熟。”
“大数据不是低端业务的简单整合。”数据堂CEO齐红威说,“现在的大数据应用还非常浅,远没到分析阶段。”
人才瓶颈制约发展:基础性数据分析人才缺口达1400万
“全球竞争对手,几乎早于我们半年,把顶尖大学大数据研究室里的优秀专家挖光了。”滴滴出行CEO程维说,“目前,我国每年培养的大数据深度学习方面的博士生大概只有50个人。”
“大数据发展的瓶颈是人才。”程维说,大数据健康发展,必须培养出世界领先的团队。
据中国商业联合会数据分析专业委员会统计,我国未来基础性数据分析人才缺口将达1400万;而在BAT企业招聘职位里,60%以上都在找大数据人才。
“一个大数据方面的普通大学生,年薪起码也有五六万美金,吸引力不能说不强,但现在还是缺人。”数联铭品CEO曾途告诉记者,“大数据是一个新兴事物,高校、院所里培养的人才还不多。这种现象短时间内很难改变。”
“现在大数据有很多问题,首先就是人才缺乏。”北京大数据研究院学术委员会主任张平文提到了一个担忧,“高端人才都在公司里,年薪上千万,学校雇不起。这可能会对基础研究产生影响。”在他看来,解决这个问题,需要高校、院所机制体制的突破。
个人隐私亟待保护:大数据运用还在法外“裸奔”
“前两天,家人甲状腺不舒服,我在网上查了相关知识。过了一天,就有人说是甲状腺医生,想加我为微信好友。”张平文所说的,正是人们对于数据安全的担忧。
“数据具有特殊性。如果反映的是群体趋势,这对生活是有益的;如果触及个人隐私,就可能造成伤害。”柴银辉说。
“在美国,你去贷款,但哪一年在图书馆借书忘了还或推迟还,就可能受影响。美国诚信体系建设比较完善。同时,几十年来,相关立法可以让个人隐私得到很好的保护。”曾途说,“目前,我国大数据还处在起步阶段,尚未进行立法监管。”
“存在可观的利润空间,就可能出现泄密、买卖信息。”曾途认为,不让大数据运用在法外“裸奔”,“立法应当提上议程”。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 一、数据分析四大思维 1. 对比思维:没有对比就没有分析 核心观点:单独一个数字没有意义,有 ...
2026-10-05Kimball 是方法,星型模型是它产出的形状。 很多人把"Kimball vs 星型模型"当成一道选择题——这本身就是个误会:Kimball 是动词 ...
2026-10-05写在开头 老板在微信上甩来一句: "帮我看下为什么销量跌了。" ” 你回工位,打开 SQL,开始写。查订单表、拉近三个月、按 ...
2026-10-03CDA数据分析师 出品 作者:李诗怡 1. 事实表 vs 维度表 对比维度 事实表 维度表 核心问题 记录“业务发生了什么事” 描述 ...
2026-10-02做数据聚合时,PySpark的groupBy()确实能完成统计,这也是它的本职工作。但它有一个根本性局限:每一组数据,最终只能返回一行 ...
2026-10-01热力地图是数据可视化中极具辨识度与实用性的空间分析图表,结合地理空间维度与数据密度特征,通过颜色深浅、色阶渐变直观展示数 ...
2026-09-30 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-09-30同样是“银行数据岗”,在国有大行总行数据中心、在一家城商行的零售部、在银行系金融科技子公司、在保险公司,工作内容、成长节 ...
2026-09-29在数据分析与统计学研究中,数据往往不是独立存在的,不同变量之间普遍存在相互关联、相互影响的关系。相关性统计分析是挖掘变量 ...
2026-09-29 导读:大多数人只把 dataclasses 当成偷懒工具,用来少写 __init__、__repr__ 这类魔法方法。但它的能力远不止于此。本文带 ...
2026-09-29 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-09-29在MySQL数据库运维与业务开发中,行业普遍存在“数据达到千万级就必须分表”的说法。但在实际生产环境中,千万条数据并不是强制 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 5W1H 分析法 定义:经典系统性思维框架,通过六个核心维度对问题进行全方位拆解与剖析,确 ...
2026-09-28 很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当 ...
2026-09-28CDA数据分析师 出品 作者:李诗怡 1. 用户标签体系 定义: 通过一系列高度精炼的特征标识,对用户属性、行为与偏好进行量化刻画 ...
2026-09-24Pandas是Python生态中用于表格数据处理的核心库,广泛应用于数据清洗、统计运算、报表输出、数据分析建模等场景。在处理极大数值 ...
2026-09-24随着数字经济快速发展,数据已成为核心生产要素,各行各业的业务沉淀、用户行为、设备运行、市场交易均产生海量数据。数据处理作 ...
2026-09-24 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-09-24在时序数据分析中,大部分业务数据并非持续平稳变化,而是会在某些时间节点出现突然抬升、断崖下跌、趋势反转、波动异变等现象, ...
2026-09-23在统计学与数据分析中,研究多组数据差异最常用的方法为单因素方差分析与事后多重比较。很多数据分析初学者容易混淆两者功能,认 ...
2026-09-23