京公网安备 11010802034615号
经营许可证编号:京B2-20210330
好久没写文章了,本人目前从事BI行业,主要做BO(报表展示)这一块,写这一篇文章主要是想分享一下自己的心得。本人不是大牛,基础小白,所以下面你会看到的更多是不经润色(不经大脑)的心得体会,而不是一堆NB轰轰的专业名称,算法,建模思想,分析思路等技术分享型文章。更多的是对这个职业的看法,技术上的问题相信度娘比我更加专业!
欢迎吐槽指正!
说到数据分析一定要讲BI
商业智能(BI,BusinessIntelligence)。
BI(BusinessIntelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助企业做出明智的业务经营决策。
广义的BI是包括很多方面的内容,包括数据处理—》数据存储—》数据仓库—》(数据挖掘)—》BO展示层
BI是智能化的数据分析,说白了就是很多手工的工作我们让电脑帮我们做了,省去大量复杂繁琐的人工,这就是智能。比如日报,周报,月报这些报表我们统一用工具定时自己跑出来!
要说的有3点:
1、目前大部分企业的BI是不包括数据挖掘的,实际上很多人也不是很清楚这个流程,一般只是认为BI就是做报表的。恩,对,就是做报表的(BO展示层)。
2、一般小企业的数据分析岗位,很多只是简单粗暴的DB+Excel,所以你会发现,**,工资好低!
3、DB+Excel是基于小企业数据分析量不大才能这么做的,未来数据暴增下,一个注重数据分析的企业势必会走势智能化这条路,毕竟人工也是成本啊~
数据分析与数据挖掘
/**以下是百度百科解释**/
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这一过程也是质量管理体系的支持过程。在实用中,数据分析可帮助人们作出判断,以便采取适当行动。
数据挖掘(英语:Datamining),又译为资料探勘、数据采矿。它是数据库知识发现(英语:Knowledge-DiscoveryinDatabases,简称:KDD)中的一个步骤。数据挖掘一般是指从大量的数据中通过算法搜索隐藏于其中信息的过程。数据挖掘通常与计算机科学有关,并通过统计、在线分析处理、情报检索、机器学习、专家系统(依靠过去的经验法则)和模式识别等诸多方法来实现上述目标。
数据分析和数据挖掘很多人没有分清,数据分析其实也是包括数据挖掘的,不过现在大部分企业细分岗位,一般数据分析和数据挖掘是两个不同的岗位!
以下我所讲的数据分析都是基于目前企业数据分析岗位而言(狭义上的数据分析,做报表的~)
数据分析主要是描述性统计分析,出报表,属于BO层面。工具有IBMcognos、SAPBO、oracleBIEE、MicrosoftSSRS、MicroStrategy、Smartbi、QlikView、Power-BI等~太多了,基本功能都相似,就是做好OLAP数据集后通过可视化的操作开发出报表框架,再定时出报表!
数据挖掘主要用于海量数据挖掘、预测性分析,比如关联规则,分类、回归、聚类、离群点检测之类的算法,主要工具有SAS、SPSS、R&Python、MSDataMing等,SAS&SPSS可视化界面,操作简单,比较容易上手;R&Python需要自己编程,难度比较大,但是函数、算法都封装好了,可以直接拿来用。
数据挖掘主要是基于海量的数据,即大数据。现在感觉任何东西跟大数据挂钩,它就变得高大上了!基于这个数据量的前提,所以目前国内做数据挖掘的主要在金融(银行、保险、证券)、电信、广告等行业&BAT三大巨头!
说实在数据挖掘,算法,统计思想这些不是最重要的,最根本是业务知识!跟BO对比起来,数据挖掘更最要你对业务的理解,如果你对业务理解透彻了,很多东西甚至都不需要经算法建模,只需要画一个透视图、透视表你就会发现其中的规律(知识)了。
很多新手都会问到的一个问题是,入门需要什么技能?
一、对于数据分析而言,最重要的技能是SQL、SQL、SQL+BO工具(这个有些了解就可,毕竟使用简单)
SQL需要会到什么程度?企业日常用到的大部分是:80%(增删查改+连接查询+基本聚合函数+数据格式处理函数)+20%(其他函数使用),而你只要需要会增删查改+连接查询+基本聚合函数+数据格式处理函数这些基础功能即可,其他函数使用通过百度你能看懂能用就行,使用率比较低。
二、对于(DM)数据挖掘而言,建模大部分的工作还是花在了数据处理上,这个要看对应企业使用的工具,数据处理流程要懂!!+算法(建模)思想+统计学基础,业务知识都是在日常工作中积累的。SO,DM的入门基础就相对要高些,门槛也相对较高。
三、补充一点:对于数据分析和数据挖掘以及大数据相关的工作还有一个特别重要的岗位,就是数据库开发。不同于DBA,大部分BI&DM80%数据库开发的工作其实都是在倒腾数据,所以前期数据处理环节特别重要,衍生出专业的数据库开发,主要做ETL、数据迁移,建多维数据集、数据仓库,OLAP,universe,query之类的工作。对技术要求较高,属于底层工作人员,个人觉得特别重要!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据收集是数据分析、数据挖掘与数字化运营的源头工作,数据收集的完整性、准确性、时效性直接决定后续数据分析结果的可信度与业 ...
2026-09-21箱线图是数据分析中用于识别数据分布、判断离散程度、筛查异常值的核心图表。相比于直方图、趋势图,箱线图可以精准区分正常数据 ...
2026-09-21 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-09-21在数据库数据查询与数据分析工作中,日期时间是最常用的数据类型之一。原始数据库中存储的日期格式多为标准时间戳、年月日时分秒 ...
2026-09-20在时序数据分析中,增长率是衡量数据涨跌幅度、研判发展趋势、识别周期波动的核心指标,主要分为环比增长率与同比增长率。传统Ex ...
2026-09-20 很多企业团队并非缺乏指标,而是陷入“指标失控”:仪表盘上堆满实时跳动的数据,却无法回答“当前瓶颈在哪、下一步该做什么 ...
2026-09-20CDA数据分析师 出品 作者:李诗怡 STP模型(营销战略三步法) 定义: 现代营销战略核心框架,通过市场细分(S)、目标市场选择( ...
2026-09-18在互联网产品迭代、运营优化、界面改版与策略升级过程中,主观经验判断容易造成决策偏差、盲目改版、资源浪费等问题。AB实验(AB ...
2026-09-18 很多企业并不缺少指标,缺少的是让指标“串起来、动起来、用起来”的体系。零散指标像散落一地的珠子,指标体系则是那根把珠 ...
2026-09-18在电商行业精细化运营时代,流量红利逐步消退,粗放式投流、广撒网营销模式已无法适配市场竞争需求。依托用户点击、加购、收藏、 ...
2026-09-17在数据可视化与数据分析工作中,图表是将零散数据转化为直观业务规律的核心工具。不同图表拥有专属的数据逻辑与分析维度,能够从 ...
2026-09-17 很多数据分析师每天盯着GMV、DAU、转化率,但当被问到“哪些指标在所有行业都适用”“哪些指标只对电商有意义”“二者如何搭 ...
2026-09-17在企业数字化运营、业务流程管理与精细化管控体系中,流程运营是串联各项业务环节、保障工作落地、提升运转效率的核心载体。无论 ...
2026-09-16在数据分析与统计学研究中,卡方检验是分析分类变量关联性与差异性的重要方法,广泛应用于市场调研、行为统计、社会调查、商业数 ...
2026-09-16 很多数据分析师每天盯着GMV、DAU、转化率,但当被问到“什么是指标”“指标和维度有什么区别”“如何定义指标值的计算规则和 ...
2026-09-16CDA数据分析师 出品 作者:李诗怡 定义: 用户增长核心分析框架,刻画用户从接触产品到自发推荐的全生命周期,五个递进环节构建 ...
2026-09-15在数字化营销与精细化用户运营时代,企业传统的广撒网式营销模式成本高、转化率低,已无法适配精准商业竞争需求。客户画像作为大 ...
2026-09-15 很多数据分析师精通描述性统计,能熟练计算均值、中位数、标准差,但当被问到“用500个样本如何推断10万用户的真实满意度” ...
2026-09-15在MySQL数据库数据查询与数据分析中,GROUP BY与ORDER BY是使用频率极高的核心关键字。二者语法结构相似,常搭配使用,但核心功 ...
2026-09-14随着数字化治理、智慧运营、数字孪生技术的普及,数字体征成为衡量业务状态、系统运行、城市治理与企业经营健康度的核心体系。数 ...
2026-09-14