好久没写文章了,本人目前从事BI行业,主要做BO(报表展示)这一块,写这一篇文章主要是想分享一下自己的心得。本人不是大牛,基础小白,所以下面你会看到的更多是不经润色(不经大脑)的心得体会,而不是一堆NB轰轰的专业名称,算法,建模思想,分析思路等技术分享型文章。更多的是对这个职业的看法,技术上的问题相信度娘比我更加专业!
欢迎吐槽指正!
说到数据分析一定要讲BI
商业智能(BI,BusinessIntelligence)。
BI(BusinessIntelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助企业做出明智的业务经营决策。
广义的BI是包括很多方面的内容,包括数据处理—》数据存储—》数据仓库—》(数据挖掘)—》BO展示层
BI是智能化的数据分析,说白了就是很多手工的工作我们让电脑帮我们做了,省去大量复杂繁琐的人工,这就是智能。比如日报,周报,月报这些报表我们统一用工具定时自己跑出来!
要说的有3点:
1、目前大部分企业的BI是不包括数据挖掘的,实际上很多人也不是很清楚这个流程,一般只是认为BI就是做报表的。恩,对,就是做报表的(BO展示层)。
2、一般小企业的数据分析岗位,很多只是简单粗暴的DB+Excel,所以你会发现,**,工资好低!
3、DB+Excel是基于小企业数据分析量不大才能这么做的,未来数据暴增下,一个注重数据分析的企业势必会走势智能化这条路,毕竟人工也是成本啊~
数据分析与数据挖掘
/**以下是百度百科解释**/
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这一过程也是质量管理体系的支持过程。在实用中,数据分析可帮助人们作出判断,以便采取适当行动。
数据挖掘(英语:Datamining),又译为资料探勘、数据采矿。它是数据库知识发现(英语:Knowledge-DiscoveryinDatabases,简称:KDD)中的一个步骤。数据挖掘一般是指从大量的数据中通过算法搜索隐藏于其中信息的过程。数据挖掘通常与计算机科学有关,并通过统计、在线分析处理、情报检索、机器学习、专家系统(依靠过去的经验法则)和模式识别等诸多方法来实现上述目标。
数据分析和数据挖掘很多人没有分清,数据分析其实也是包括数据挖掘的,不过现在大部分企业细分岗位,一般数据分析和数据挖掘是两个不同的岗位!
以下我所讲的数据分析都是基于目前企业数据分析岗位而言(狭义上的数据分析,做报表的~)
数据分析主要是描述性统计分析,出报表,属于BO层面。工具有IBMcognos、SAPBO、oracleBIEE、MicrosoftSSRS、MicroStrategy、Smartbi、QlikView、Power-BI等~太多了,基本功能都相似,就是做好OLAP数据集后通过可视化的操作开发出报表框架,再定时出报表!
数据挖掘主要用于海量数据挖掘、预测性分析,比如关联规则,分类、回归、聚类、离群点检测之类的算法,主要工具有SAS、SPSS、R&Python、MSDataMing等,SAS&SPSS可视化界面,操作简单,比较容易上手;R&Python需要自己编程,难度比较大,但是函数、算法都封装好了,可以直接拿来用。
数据挖掘主要是基于海量的数据,即大数据。现在感觉任何东西跟大数据挂钩,它就变得高大上了!基于这个数据量的前提,所以目前国内做数据挖掘的主要在金融(银行、保险、证券)、电信、广告等行业&BAT三大巨头!
说实在数据挖掘,算法,统计思想这些不是最重要的,最根本是业务知识!跟BO对比起来,数据挖掘更最要你对业务的理解,如果你对业务理解透彻了,很多东西甚至都不需要经算法建模,只需要画一个透视图、透视表你就会发现其中的规律(知识)了。
很多新手都会问到的一个问题是,入门需要什么技能?
一、对于数据分析而言,最重要的技能是SQL、SQL、SQL+BO工具(这个有些了解就可,毕竟使用简单)
SQL需要会到什么程度?企业日常用到的大部分是:80%(增删查改+连接查询+基本聚合函数+数据格式处理函数)+20%(其他函数使用),而你只要需要会增删查改+连接查询+基本聚合函数+数据格式处理函数这些基础功能即可,其他函数使用通过百度你能看懂能用就行,使用率比较低。
二、对于(DM)数据挖掘而言,建模大部分的工作还是花在了数据处理上,这个要看对应企业使用的工具,数据处理流程要懂!!+算法(建模)思想+统计学基础,业务知识都是在日常工作中积累的。SO,DM的入门基础就相对要高些,门槛也相对较高。
三、补充一点:对于数据分析和数据挖掘以及大数据相关的工作还有一个特别重要的岗位,就是数据库开发。不同于DBA,大部分BI&DM80%数据库开发的工作其实都是在倒腾数据,所以前期数据处理环节特别重要,衍生出专业的数据库开发,主要做ETL、数据迁移,建多维数据集、数据仓库,OLAP,universe,query之类的工作。对技术要求较高,属于底层工作人员,个人觉得特别重要!
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
数据分析在当今信息时代发挥着重要作用。单因素方差分析(One-Way ANOVA)是一种关键的统计方法,用于比较三个或更多独立样本组 ...
2025-04-25CDA持证人简介: 居瑜 ,CDA一级持证人国企财务经理,13年财务管理运营经验,在数据分析就业和实践经验方面有着丰富的积累和经 ...
2025-04-25在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-24以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《刘静:10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda ...
2025-04-23大咖简介: 刘凯,CDA大咖汇特邀讲师,DAMA中国分会理事,香港金管局特聘数据管理专家,拥有丰富的行业经验。本文将从数据要素 ...
2025-04-22CDA持证人简介 刘伟,美国 NAU 大学计算机信息技术硕士, CDA数据分析师三级持证人,现任职于江苏宝应农商银行数据治理岗。 学 ...
2025-04-21持证人简介:贺渲雯 ,CDA 数据分析师一级持证人,互联网行业数据分析师 今天我将为大家带来一个关于用户私域用户质量数据分析 ...
2025-04-18一、CDA持证人介绍 在数字化浪潮席卷商业领域的当下,数据分析已成为企业发展的关键驱动力。为助力大家深入了解数据分析在电商行 ...
2025-04-17CDA持证人简介:居瑜 ,CDA一级持证人,国企财务经理,13年财务管理运营经验,在数据分析实践方面积累了丰富的行业经验。 一、 ...
2025-04-16持证人简介: CDA持证人刘凌峰,CDA L1持证人,微软认证讲师(MCT)金山办公最有价值专家(KVP),工信部高级项目管理师,拥有 ...
2025-04-15持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。在实际生活中,我们可能会 ...
2025-04-14在 Python 编程学习与实践中,Anaconda 是一款极为重要的工具。它作为一个开源的 Python 发行版本,集成了众多常用的科学计算库 ...
2025-04-14随着大数据时代的深入发展,数据运营成为企业不可或缺的岗位之一。这个职位的核心是通过收集、整理和分析数据,帮助企业做出科 ...
2025-04-11持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。 本次分享我将以教培行业为 ...
2025-04-11近日《2025中国城市长租市场发展蓝皮书》(下称《蓝皮书》)正式发布。《蓝皮书》指出,当前我国城市住房正经历从“增量扩张”向 ...
2025-04-10在数字化时代的浪潮中,数据已经成为企业决策和运营的核心。每一位客户,每一次交易,都承载着丰富的信息和价值。 如何在海量客 ...
2025-04-09数据是数字化的基础。随着工业4.0的推进,企业生产运作过程中的在线数据变得更加丰富;而互联网、新零售等C端应用的丰富多彩,产 ...
2025-04-094月7日,美国关税政策对全球金融市场的冲击仍在肆虐,周一亚市早盘,美股股指、原油期货、加密货币、贵金属等资产齐齐重挫,市场 ...
2025-04-08背景 3月26日,科技圈迎来一则重磅消息,苹果公司宣布向浙江大学捐赠 3000 万元人民币,用于支持编程教育。 这一举措并非偶然, ...
2025-04-07在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03