京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据是个什么玩意_数据分析师
不过文章难懂,抽象,太长,我没有完全读到后面。主要观点大致是认为大数据不能代表未来大趋势。出于对大数据这个词的敏感,也想谈谈观点。
说实话,我有很多年以来比较讨厌来自信息领域的一些名词:数字地球、云计算、决策支持系统、专家系统、复杂性科学、数据挖掘、大数据。这些玩意一个名词接着一个名词,让人感觉总是炒一些新鲜的概念。其实上述名词确实也有一定的意义,但是它们发挥的科学推动作用不大。我为啥讨厌呢,是因为我认为是这些概念的受害者。因为我曾经是计算机粉丝,当然也喜欢学习研究这些玩意。最后发现我自己走了弯路,费了很多功夫阅读这些,什么真正的东西都没学会。
其实在这些名词出现以前,各学科人们早就在使用这些概念了。如数字地球,吸引了大批地理界、GIS界的年轻人,最后我们发现除了会编几个计算机图形可视化的程序外,其它一无所获。看着别人发表着大把的SCI,我们真纳闷,天天研究新概念,还不如研究老古懂学科。后来,我们发现地球科学领域的数据(遥感、气象资料)绝对是海量的,数据生产的速度远远超过了人们利用数据做研究的速度。Google地球也发布了。实际上数字地球确实是建成了,但很少有人说我们是在做数字地球。不谈数字地球的人做了不少数字地球的事,天天谈数字地球的人什么也没搞出来。
另外决策支持系统是个什么玩意,我读了很多这方面的书,感觉也很虚无飘渺。
曾经有一个叫做“元胞自动机”(CA)的概念也很流行在GIS界,但最终也不知如何应用该理论,没什么好的论文或成果发表出来。等到后来,我们了解了水文领域的分布式水文模型、大气领域的气候模式、流体领域的CFD和格子Boltzmann模型,发现按照CA的定义来看,上述模型其实都是CA的范畴,只是针对特定的专业性了。CA的概念远不如上述模型应用那样普及,专业性也不够强。不可否认的是,确实有少量学者开发出了CA模型,有一定的用处。
至于大数据,以前它相应的称呼应该是数据挖掘。包括刚刚仙逝的老邪院士为代表的很多遥感学者,都在分析海量遥感数据,难道这不是大数据?那些从事气候变化研究的相关学者天天都在利用海量资料分析各种气候指标,难道不是在数据挖掘?可是谁又在写论文时,把大数据和数据挖掘列为关键词呢?
当然,我也认识到了大数据这个词主要针对社会科学领域。社科领域的大数据特指那些形式杂乱、细碎、海量如牛毛的聊天信息、Email信息、网页新闻信息、广告信息,以及发表在期刊上的信息。这些数据不像遥感数据、大气数据那样可以以特定数据集的形式整理和存放。这就需要研究分析这些资料的人要有特定的数据整理能力。一种方法是使用一些软件,不过软件大都是针对特定形式的数据集,如文献计量分析软件。它们不能适应于各种杂乱数据。另一种方法就是取决于研究者自己的特殊能力了,这样的好处是不需要拘泥于现有软件,可以适应任何数据分析。比如使用python语言来自行编代码实施数据搜索。我认为自己是具备这个能力的!我不认为我是在吹牛。但是我却不从事这方面的研究。
虽然python语言不难,会用它的人极多,但事实证明不是每个从事科研的人都最终能学会的。
虽然我认为大数据这个词比较土,很一般化,但它在社科领域确实具有特定的意义。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在数据指标体系搭建工作中,从业者常困惑于指标搭建的核心逻辑:究竟是依托一线零散数据自下而上汇总指标,还是基于战略目标自上 ...
2026-07-31在数据分析、问卷研究、实验复盘、业务建模的工作中,大多数人最关注的是“用什么统计方法”:是做T检验、方差分析、卡方检验, ...
2026-07-31 许多数据分析师精通Excel函数和SQL查询,但当面对一张上万行的销售明细表,要快速回答“哪个地区销量最高”“哪款产品增长最 ...
2026-07-31在问卷调研的数据分析流程中,“先检验信效度,再开展进阶统计分析”是通用的规范逻辑。很多从业者会听到“问卷效度高,后续可以 ...
2026-07-30【核心关键词】大数据、统计学、专业、毕业生、论文、课程、计算机、建模、知识、数据分析、机器学习、数据科学、大数据技术、 ...
2026-07-30 很多数据分析师掌握了Excel函数、会写SQL查询,但当被问到“数据从哪里来”“数据加工有哪些步骤”“如何使用分析工具连接数 ...
2026-07-30在业务数据分析中,按天拆分统计夜间时段的数据是高频需求——比如电商夜间订单监测、平台夜间用户活跃度分析、运维系统夜间异常 ...
2026-07-29在机器学习建模与特征工程实践中,判断不同特征对模型预测效果的贡献度,是特征筛选、模型解释、业务归因的核心环节。特征置换重 ...
2026-07-29 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-07-29【核心关键词】岗位、数字化、经验、课程、方法论、决策、企业、大方向、数据分析、销售管理、理论知识、思维方式、分析销售、 ...
2026-07-28在问卷调研、用户分群、效果对比等业务数据分析中,分类变量的关联性与差异性验证是高频需求。卡方检验作为针对离散分类数据的经 ...
2026-07-28 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-07-28在Excel数据分析与报表制作中,数据透视表是快速完成多维度汇总、分组统计的核心工具。很多从业者在得到透视表汇总结果后,为了 ...
2026-07-27 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-07-27当下,我们已然步入数据要素价值全面释放的智能时代。数据不再只是零散的数字记录,更是驱动新质生产力运转的核心动能、滋养人工 ...
2026-07-27【核心关键词】客户、数据分析、指标体系、数据采集、数据指标、业务数据、分析思路、业务需求、分析方法 【专访摘要】本次 CDA ...
2026-07-24在数据分析、业务建模与数字化运营体系中,原始业务数据普遍存在缺失、重复、异常、口径不一致等质量问题,直接用于分析与建模会 ...
2026-07-24 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-07-24在数据驱动的精细化运营体系中,指标是业务判断、效果复盘、策略优化的核心依据。随着企业数据化程度提升,指标数量持续膨胀,但 ...
2026-07-23在用户运营与产品增长体系中,留存是衡量产品真实价值与用户粘性的核心标尺,也是决定用户生命周期价值、获客投产比的底层因素。 ...
2026-07-23