数据分析师技术_数据分析技术_数据分析培训_第93页-CDA数据分析师官网

R语言处理大规模数据集的编程要点

2017-04-21

R语言处理大规模数据集的编程要点 1.提高程序效率，保证执行速度 (1)尽量使用向量化运算 (2)尽量使用矩阵，必要时才使用数据框 (3)使用read.table时，尽量显式设定colClasses和nrows，设定comment.cha ...

R语言各种假设检验实例整理

2017-04-21

一、正态分布参数检验 例1.某种原件的寿命X（以小时计）服从正态分布N（μ, σ)其中μ, σ2均未知。现测得16只元件的寿命如下： 159 280 101 212 224 379 179 264 222 362 168 250 149 260 485 ...

如何使用R语言解决可恶的脏数据

2017-04-21

如何使用R语言解决可恶的脏数据 在数据分析过程中最头疼的应该是如何应付脏数据，脏数据的存在将会对后期的建模、挖掘等工作造成严重的错误，所以必须谨慎的处理那些脏数据。 脏数据的存在形式主要有如下几种 ...

一个使用R语言做数据处理的实例

2017-04-21

一个使用R语言做数据处理的实例 最近一个同学找到我，希望我帮忙处理一份数据。那份数据是这样的：包含了3661行，第一行为各列的名称；包含8列，第一列为专利ID，其余7列为企业ID。 这份数据截图如下所示： ...

用R语言做Venn（韦恩）图

2017-04-21

用R语言做Venn（韦恩）图 首先介绍一下韦恩图（英语：Venn diagram） ，也叫做文氏图、温氏图、范氏图，这都一个意思。它是数学学科中分支集合论（或者类的理论）的一支，在不太严格的意义下用来表示集合（或 ...

R语言与格式、日期格式、格式转化

2017-04-20

R语言与格式、日期格式、格式转化 R语言的基础包中提供了两种类型的时间数据，一类是Date日期数据，它不包括时间和时区信息，另一类是POSIXct/POSIXlt类型数据，其中包括了日期、时间和时区信息。基本总结如下 ...

R语言中plyr包

2017-04-20

R语言中plyr包 apply族函数是R语言中很有特色的一类函数，包括了apply、sapply、lapply、tapply、aggregate等等。这一类函数本质上是将数据进行分割、计算和整合。它们在数据分析的各个阶段都有很好的用处。例 ...

R语言数据集合并、数据增减、不等长合并

2017-04-20

R语言数据集合并、数据增减、不等长合并 数据选取与简单操作： 一、数据合并 1、merge()函数 最常用merge()函数，但是这个函数使用时候这两种情况需要注意： 1、merge(a,b)，纯粹地把两个数据集 ...

R语言文本挖掘之中文分词包—Rwordseg包(原理、功能、详解)

2017-04-20

R语言文本挖掘之中文分词包—Rwordseg包(原理、功能、详解) 与前面的RsowballC分词不同的地方在于这是一个中文的分词包，简单易懂，分词是一个非常重要的步骤，可以通过一些字典，进行特定分词。大致分析步骤如 ...

R语言实现关系图谱

2017-04-20

R语言实现关系图谱 数据是这样存储的 社交关系分析和可视化用的是igraph包 脚本是这样的 ------------------------------------------------------------------------------------------- #ins ...

R语言之文本挖掘--分词

2017-04-20

R语言之文本挖掘--分词 当前对文本挖掘的需求越来越多，而基于文本挖掘又可以实现舆情监控、文本分类、关联分析和趋势预测等。 本文主要使用李舰发布的中文分词包Rwordseg。该包引用了@ansj开发的ansj中文 ...

SAS宏中两个常用的options选项

2017-04-19

SAS宏中两个常用的options选项 一、关于SAS中options选项msglevel msglevel：默认值是N（默认是关闭的），仅打印notes，warnings和error信息，如果设为I，则除了打印N选项的信息，同时打印附属信息，包括索 ...

SAS、R如何手动输入数据

2017-04-19

SAS、R如何手动输入数据 一道简单的题目，将下面的数据分别手动输入到SAS和R中，如何实现？ 一、SAS 解决方案： data cust_base_info; inputcust_no$ name$sex$ is_marri ...

sas字符变量基于bad_rate分组

2017-04-19

sas字符变量基于bad_rate分组 最近因为模型拟合的不理想的原因，sas信用评分的内容可能要停更一两周了，因为我还没能进行到模型评分卡这一步就被跨期验证给拍下来了，我做的模型，训练的数据以及测试的数据指标 ...

sas批量删除重复超过90%的变量

2017-04-19

sas批量删除重复超过90%的变量 22年前的今天我的妈咪把我带来这个世界，费尽心思把我养到这么大，我就是4月份出生的大白羊，我的生日愿望呢，就是想有个大神在留言板块教我一个怎么识别组合变量更好解释因变量 ...

SPSS中如何对多个选项的结果进行计数

2017-04-19

对于数据的统计分析来说，有很多人觉得做出p值那一步比较高深。其实不然，数据整理和数据清洗才是吃力不讨好的事情，也能体现出数据处理人员的能力。数据整理与清洗既花费时间，又不出成果，因为大家往往觉得 ...

SPSS冷门秘籍,提高效率有捷径

2017-04-19

SPSS冷门秘籍,提高效率有捷径 在软件使用中，高手和新手的差别可能只在于一些小技巧或者快捷键的使用上。平时看多了诸如“Excel技巧大全”、“PS快捷键大全”。今天我们就来说说SPSS中那些能够提高效率，少(nen ...

Python上下文管理器

2017-04-18

Python上下文管理器 上下文管理器(context manager)是Python2.5开始支持的一种语法，用于规定某个对象的使用范围。一旦进入或者离开该使用范围，会有特殊操作被调用 (比如为对象分配或者释放内存)。它的语法形 ...

Python标准库—走马观花

2017-04-18

Python标准库—走马观花 Python有一套很有用的标准库(standard library)。标准库会随着Python解释器，一起安装在你的电脑中的。它是Python的一个组成部分。这些标准库是Python为你准备好的利器，可以让编程事半 ...

Python缩进和选择

2017-04-18

Python缩进和选择 缩进 Python最具特色的是用缩进来标明成块的代码。我下面以if选择结构来举例。if后面跟随条件，如果条件成立，则执行归属于if的一个代码块。 先看C语言的表达方式（注意，这是C，不是Python! ...