京公网安备 11010802034615号
经营许可证编号:京B2-20210330
作者 | CDA数据分析师
进行到这一步就可以开始正式的烹饪了。前面我们列举了不同纬度的分析指标,这一章我们主要看看这些指标都是怎么计算出来的。
一、算术运算
算术运算就是基本的加减乘除,在Excel或Python中数值类型的任意两列可以直接进行加、减、乘、除运算,而且是对应元素进行加、减、乘、除运算,Excel 中的算术运算比较简单,这里就不展开了,下面主要介绍Python中的算术运算。
列相加的具体实现如下所示。
两列相减的具体实现如下所示。
两列相乘的具体实现如下所示。
两列相除的具体实现如下所示。
任意一列加/减一个常数值,这一列中的所有值都加/减这个常数值,具体实现如下所示。
任意一列乘/除一个常数值,这一列中的所有值都乘/除这一常数值
二、比较运算
比较运算和Python基础知识中讲到的比较运算一致,也是常规的大于、等于、小于之类的,只不过这里的比较是在列与列之间进行的。常用的比较运算符见2.9.2节。
在Excel中列与列之间的比较运算和Python中的方法一致,例子如下图所示。
下面是一些Python中列与列之间比较的例子。
三、汇总运算
讲到的算术运算和比较运算都是在列与列之间进行的,运算结果是有多少行的值就会返回多少个结果,而汇总运算是将数据进行汇总返回一个汇总以后的结果值。
1、 count非空值计数
非空值计数就是计算某一个区域中非空(单元格)数值的个数。
在Excel中 counta ( ) 函数用于计算某个区域中非空单元格的个数。与 counta ( ) 函数类似的一个函数是count()函数,它用于计算某个区域中含有数字的单元格的个数。
在 Python 中,直接在整个数据表上调用 count ( ) 函数,返回的结果为该数据表中每列的非空值的个数,具体实现如下所示。
count ( ) 函数默认是求取每一列的非空数值的个数,可以通过修改axis参数让其等于1,来求取每一行的非空数值的个数。
也可以把某一列或者某一行索引出来,单独查看这一列或这一行的非空值个数。
2、 sum求和
求和就是对某一区域中的所有数值进行加和操作。
在 Excel 中要求取某一区域的和,直接在 sum ( ) 函数后面的括号中指明要求和的区域,即要对哪些值进行求和操作即可。例子如下所示。
在Python中,直接在整个数据表上调用 sum ( ) 函数,返回的是该数据表每一列的求和结果,例子如下所示。
sum ( ) 函数默认对每一列进行求和,可通过修改axis参数,让其等于1,来对每一行的数值进行求和操作。
也可以把某一列或者某一行索引出来,单独对这一列或这一行数据进行求和操作。
3、mean求均值
求均值是针对某一区域中的所有值进行求算术平均值运算。均值是用来衡量数据一般情况的指标,容易受到极大值、极小值的影响。
在Excel中对某个区域内的值进行求平均值运算,用的是 average ( ) 函数,只要在average ( ) 函数中指明要求均值运算的区域即可,比如:
在Python中的求均值利用的是mean()函数,如果对整个表直接调用 mean ( ) 函数,返回的是该表中每一列的均值。
mean ( ) 函数默认是对数据表中的每一列进行求均值运算,可通过修改 axis 参数,让其等于1,来对每一行进行求均值运算。
也可以把某一列或者某一行通过索引的方式取出来,然后在这一行或这一列上调用mean ( ) 函数,单独求取这一行或这一列的均值。
4、 max求最大值
求最大值就是比较一组数据中所有数值的大小,然后返回最大的一个值。
在Excel和Python中,求最大值使用的都是 max ( ) 函数,在Excel中同样只需要在 max ( ) 函数中指明要求最大值的区域即可;在Python中,和其他函数一样,如果对整个表直接调用 max ( ) 函数,则返回该数据表中每一列的最大值。 max ( ) 函数也可以对每一行求最大值,还可以单独对某一行或某一列求最大值。
5、 min求最小值
求最小值与求最大值是相对应的,通过比较一组数据中所有数值的大小,然后返回最小的那个值。
在Excel和Python中都使用 min ( ) 函数来求最小值,它的使用方法与求最大值的类似,这里不再赘述。示例代码如下。
6、 median求中位数
中位数就是将一组含有n个数据的序列X按从小到大排列,位于中间位置的那个数。
中位数是以中间位置的数来反映数据的一般情况,不容易受到极大值、极小值的影响,因而在反映数据分布情况上要比平均值更有代表性。
现有序列为X:{X1、X2、X3、......、Xn}。
如果n为奇数,则中位数:
如果n为偶数,则中位数:
例如,1、3、5、7、9的中位数为5,而1、3、5、7的中位数为(3+5)/2=4。
在Excel和Python中求一组数据的中位数,都是使用 median ( ) 函数来实现的。
下面为在Excel中求中位数的示例:
在Python中,median ( ) 函数的使用原则和其他函数的一致。
7、mode求众数
顾名思义,众数就是一组数据中出现次数最多的数,求众数就是返回这组数据中出现次数最多的那个数。
在Excel和Python中求众数都使用 mode ( ) 函数,使用原则与其他函数完全一致。
在Excel中求众数的示例如下:
在Python中求众数的示例如下:
8、 var 求方差
方差是用来衡量一组数据的离散程度(即数据波动幅度)的。
在Excel和Python中求一组数据中的方差都使用 var ( ) 函数。
下面为在Excel中求方差的示例:
在Python中, var ( ) 函数的使用原则和其他函数的一致。
9、 std 求标准差
标准差是方差的平方根,二者都是用来表示数据的离散程度的。
在Excel中计算标准差使用的是 stdevp ( ) 函数,示例如下:
在 Python 中计算标准差使用的是 std ( ) 函数, std ( ) 函数的使用原则与其他函数的一致,示例如下:
10、 quantile 求分位数
分位数是比中位数更加详细的基于位置的指标,分位数主要有四分之一分位数、四分之二分位数、四分之三分位数,而四分之二分位数就是中位数。
在Excel中求分位数用的是 percentile ( ) 函数,示例如下:
在Python中求分位数用的是 quantile ( ) 函数,要在 quantile 后的括号中指明要求取的分位数值, quantile ( ) 函数与其他函数的使用规则相同。
四、 相关性运算
相关性常用来衡量两个事物之间的相关程度,比如我们前面举的例子:啤酒与尿布二者的相关性很强。我们一般用相关系数来衡量两者的相关程度,所以相关性计算其实就是计算相关系数,比较常用的是皮尔逊相关系数。
在Excel中求取相关系数用的是 correl ( ) 函数,示例如下:
在Python中求取相关系数用的是 corr ( ) 函数,示例如下:
还可以利用 corr( ) 函数求取整个 DataFrame 表中各字段两两之间的相关性,示例如下:
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在零售行业从“流量争夺”转向“价值深耕”的演进中,塔吉特百货(Target)以两场标志性实践树立了行业标杆——2000年后的孕妇精 ...
2025-12-15在统计学领域,二项分布与卡方检验是两个高频出现的概念,二者都常用于处理离散数据,因此常被初学者混淆。但本质上,二项分布是 ...
2025-12-15在CDA(Certified Data Analyst)数据分析师的工作链路中,“标签加工”是连接原始数据与业务应用的关键环节。企业积累的用户行 ...
2025-12-15在Python开发中,HTTP请求是与外部服务交互的核心场景——调用第三方API、对接微服务、爬取数据等都离不开它。虽然requests库已 ...
2025-12-12在数据驱动决策中,“数据波动大不大”是高频问题——零售店长关心日销售额是否稳定,工厂管理者关注产品尺寸偏差是否可控,基金 ...
2025-12-12在CDA(Certified Data Analyst)数据分析师的能力矩阵中,数据查询语言(SQL)是贯穿工作全流程的“核心工具”。无论是从数据库 ...
2025-12-12很多小伙伴都在问CDA考试的问题,以下是结合 2025 年最新政策与行业动态更新的 CDA 数据分析师认证考试 Q&A,覆盖考试内容、报考 ...
2025-12-11在Excel数据可视化中,柱形图因直观展示数据差异的优势被广泛使用,而背景色设置绝非简单的“换颜色”——合理的背景色能突出核 ...
2025-12-11在科研实验、商业分析或医学研究中,我们常需要判断“两组数据的差异是真实存在,还是偶然波动”——比如“新降压药的效果是否优 ...
2025-12-11在CDA(Certified Data Analyst)数据分析师的工作体系中,数据库就像“数据仓库的核心骨架”——所有业务数据的存储、组织与提 ...
2025-12-11在神经网络模型搭建中,“最后一层是否添加激活函数”是新手常困惑的关键问题——有人照搬中间层的ReLU激活,导致回归任务输出异 ...
2025-12-05在机器学习落地过程中,“模型准确率高但不可解释”“面对数据噪声就失效”是两大核心痛点——金融风控模型若无法解释决策依据, ...
2025-12-05在CDA(Certified Data Analyst)数据分析师的能力模型中,“指标计算”是基础技能,而“指标体系搭建”则是区分新手与资深分析 ...
2025-12-05在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02