从今天开始不熬夜

2022-09-15   阅读量: 450

Python 数据分析师

python中过采样处理数据不平衡问题

扫码加入数据分析学习群

什么是过采样:

目的:处理数据不平衡问题。

方法:当数据不平衡的时,比如样本标签1有10000个数据,样本标签0有100个数据,这时如果采用下采样会浪费很多样本,

所以引入过采样,过采样是根据样本标签少的样本的规律去生成更多该标签样本,这样使得数据趋向于平衡。

典型的过采样方式是SMOTE等.

关于SMOTE具体算法:

1.对于少数类中每一个样本x,以欧氏距离为标准计算它到少数类样本集Smin中所有样本的距离,得到其k近邻。
2.根据样本不平衡比例设置一个采样比例以确定采样倍率N,对于每一个少数类样本x,从其k近邻中随机选择若干个样本,假设选择的近邻为xn。
3.对于每一个随机选出的近邻xn,分别与原样本按照如下的公式构建新的样本 。

添加CDA认证专家【维克多阿涛】,微信号:【cdashijiazhuang】,提供数据分析指导及CDA考试秘籍。已助千人通过CDA数字化人才认证。欢迎交流,共同成长!
68.4581 1 0 关注作者 收藏

评论(0)


暂无数据

推荐课程

推荐帖子