数据清洗的步骤是什么（下）

2019-03-25

数据清洗的意义相信大家都知道了吧？数据清洗就好比我们做菜的时候首先对食材进行清洗，防止某些不干净的东西影响我们食用时的口感以及给我们的健康带来隐患。所以说，数据清洗在数据分析工作中是一个十 ...

数据清洗的步骤是什么（上）

2019-03-25

数据清洗工作是数据分析工作中不可缺少的步骤，这是因为数据清洗能够处理掉肮脏数据，如果不清洗数据的话，那么数据分析的结果准确率会变得极低。另外数据清洗工作占据数据分析工作整个过程的七成以上的 ...

大数据处理技术之数据清洗

2019-03-19

我们在做数据分析工作之前一定需要对数据进行观察并整理，这是因为挖掘出来的数据中含有很多无用的数据，这些数据不但消耗分析的时间，而且还会影响数据分析结果，所以我们需要对数据进行清洗。在这篇文 ...

数据清洗的方法有哪些？

2019-03-08

现如今，科技得到了空前发展，正是由于这个原因，很多科学技术得到大幅度的进步。就在最近的几年里，出现了很多的名词，比如大数据、物联网、云计算、人工智能等。其中大数据的热度是最高的，这是因为现 ...

数据分析中数据清洗对象有哪些？

2018-12-07

在数据分析中数据分析获取是一个非常重要的事情，为了保证数据分析出一个很好的结果，需要一个干净的数据，干净的数据能够提高数据分析的效率，所以，数据清洗是一个很重要的工作，通过数据的清洗，就能 ...

R语言中数据清洗、整理的方法

2018-07-19

R语言中数据清洗、整理的方法 数据的清理 如同列夫托尔斯泰所说的那样：“幸福的家庭都是相似的，不幸的家庭各有各的不幸”，糟糕的恶心的数据各有各的糟糕之处，好的数据集都是相似的。一份好的，干净而整洁的 ...

数据挖掘中常用的数据清洗方法

2018-03-01

数据挖掘中常用的数据清洗方法 对于数据挖掘来说，80%的工作都花在数据准备上面，而数据准备，80%的时间又花在数据清洗上，而数据清洗的工作，80%又花在选择若干种适当高效的方法上。用不同方法清洗的数据，对 ...

spss-数据清洗-处理重复数据

2018-01-08

spss-数据清洗-处理重复数据 数据导入之后就需要对数据进行清洗。数据清洗主要是对多余重复的数据筛选清除，将缺失的数据补充完整，将错误的数据纠正或者删除。接下来操作如何将重复数据处理操作。 ...

python数据清洗系列之字符串处理详解

2017-11-30

python数据清洗系列之字符串处理详解 数据清洗是一项复杂且繁琐(kubi)的工作，同时也是整个数据分析过程中最为重要的环节。有人说一个分析项目80%的时间都是在清洗数据，这听起来有些匪夷所思，但在实际的工作 ...

spss-数据清洗-处理重复数据

2017-03-03

spss-数据清洗-处理重复数据 数据导入之后就需要对数据进行清洗。数据清洗主要是对多余重复的数据筛选清除，将缺失的数据补充完整，将错误的数据纠正或者删除。接下来操作如何将重复数据处理操作。 步骤一： ...

使用R语言进行数据清洗

2016-12-05

使用R语言进行数据清洗 数据清洗是整个数据分析过程中一个非常重要的环节。数据清洗的目的有两个，第一是通过清洗让数据可用。第二是让数据变的更适合进行后续的分析工作。本篇文章将介绍几种简单的使用R进行数 ...

机器学习基础与实践之数据清洗！

2016-07-04

想写这个系列很久了，最近刚好项目结束了闲下来有点时间，于是决定把之前学过的东西做个总结。之前看过一些机器学习方面的书，每本书都各有侧重点，机器学习实战和集体智慧编程更偏向与实战，侧重于对每个算法的实际 ...

数据清洗经验分享：什么是数据清洗 如何做好数据清洗

2019-10-28

数据清洗经验分享：什么是数据清洗 如何做好数据清洗 大数据本身是一座金矿、一种资源，沉睡的资源是很难创造价值的，它必须经过清洗、分析、建模、可视化等过程加工处理之后，才真正产生价值。 数据加工、 ...

数据分析:数据清洗的一些梳理

2016-03-18

数据分析:数据清洗的一些梳理 数据清洗， 是整个数据分析过程中不可缺少的一个环节，其结果质量直接关系到模型效果和最终结论。在实际操作中，数据清洗通常会占据分析过程的50%—80%的时间。国外有些学术机构会 ...

数据分析师：数据清洗经验_数据分析师考试

2015-06-28

数据分析师：数据清洗经验_数据分析师考试 平时习惯了在某些特定的数据集合上做实验，简单的tokenization、预处理等步骤就足够了。但是在数据越来越大的年代，数据清洗越来越重要，也越来越复杂。看到Ph ...

机器学习中的数据清洗与特征处理综述_数据分析师考试

2015-06-28

机器学习中的数据清洗与特征处理综述_数据分析师考试 日常生活工作中，处处都会与数据打交道，但你知道数据是会“说谎”的，即你看到的数据结果并不是事实。本文介绍一些常见的说谎场景以及如何避免。 ...

机器学习中的数据清洗与特征处理综述

2015-06-03

机器学习中的数据清洗与特征处理综述 背景 随着美团交易规模的逐步增大，积累下来的业务数据和交易数据越来越多，这些数据是美团做为一个团购平台最宝贵的财富。通过对这些数据的分析和挖掘，不仅 ...

【CDA干货】SQL在企业经营数据分析中的深度应用：赋能精细化经营与科学决策

2026-05-22

数字化经营时代，企业的市场竞争早已从经验决策转向数据决策。门店营收、用户转化、产品销量、成本损耗、存量资产等所有经营行为，都会以数据形式沉淀在数据库中。而SQL作为通用型结构化查询语言，是连接企业原始数 ...

【CDA干货】MySQL自增ID缺失值统计方法：快速排查断号与数据空洞

2026-05-22

在MySQL数据库日常运维、业务数据校验、数据迁移与数据清洗场景中，自增主键ID的连续性校验是一项基础且关键的工作。MySQL的Auto_increment自增ID默认从1开始依次递增，但在实际业务运行过程中，会因数据删除、事务 ...

从“数字”到“数据”：CDA数据分析师视角下的统计基本概念

2026-05-14

 很多人把统计学理解为“一堆公式和计算”，却忽略了它的本质——一门让数据“开口说话”的科学。真正的数据分析高手，不是会算平均数，而是能通过统计概念洞察业务规律。 ” 引言：为什么统计是数据分析师的“底 ...