数据科学专业问答社区，好文章，一字千金--CDA答疑社区

热线电话：13121318867

登录

PGC123

pandas assign函数用法

assign()函数是用来向dataframe中添加新列用的,返回值为一个新的dataframe，用法如下：>>> df = pd.DataFrame({'A': range(1, 11), 'B': np.random.randn(10)})Where the value is a callable, evaluated on `df`:>>> df.assign(ln_A = la

0.0000

0

2

0

关注作者

收藏

wangjuju123

使用 Beautiful Soup 解析 html 文件

#!/usr/bin/python# -*- coding: UTF-8 -*-import refrom bs4import BeautifulSouphtml_doc = """ The Dormouse's story The Dormouse's st

0.0000

0

2

0

关注作者

收藏

wangjuju123

urllib2 实现下载网页的三种方式

#!/usr/bin/python# -*- coding: UTF-8 -*-importcookielibimporturllib2url = "http://www.baidu.com"response1 = urllib2.urlopen(url)print"第一种方法" #获取状态码，200表示成功printresponse1.getcode() #获取网页内容的长

0.0000

0

2

0

关注作者

收藏

PGC123

mysql left join 右表数据不唯一的情况解决方法

如果B表符合条件的记录数大于1条，就会出现1:n的情况，这样left join后的结果，记录数会多于A表的记录数。例如：A与B表的结构如下，A记录会员信息，B记录会员每日的登入记录。A表的id与B表的uid是对应关系。A 表idusername1fdipzone2terryB 表iduidlogindate112015-01-01222015-01-013

0.0000

0

6

0

关注作者

收藏

PGC123

numpy where函数返回的是啥？

numpy的where函数用法：#语法where(condition, [x, y])#condition :条件表达式#x,y :可选参数，如果有x那么也要有y.当没有x与y参数时，函数返回符合条件元素的坐标当有x与y时，条件表达式为True的元素返回x,条件表达式为False的元素返回y例如import numpy as npa = np.array(range(27))

0.0000

0

1

0

关注作者

收藏

PGC123

dataframe applymap用法？

DataFrame中的applymap()用法：调用函数对单个数据做相应的运算，返回类型是DataFrame类型。import numpy as npimport pandas as pddf = pd.DataFrame(np.random.randn(3,4),columns=list('abcd'),index=list('ABC'))df df.applymap(lamb

0.0000

0

0

0

关注作者

收藏

PGC123

dataframe apply函数使用

DataFrame的apply方法可以实现将函数应用到由各列或行形成的一维数组上的功能，具体用法看如下代码import numpy as npimport pandas as pddf = pd.DataFrame(np.random.randn(3,4),columns=list('abcd'),index=list('ABC'))df df.apply(lambda x :

0.0000

0

3

0

关注作者

收藏

PGC123

dataframe map函数应用

map是pandas中一个重要的函数，map()主要是作用将函数作用于一个Series的每一个元素，具体用法如下所示：import numpy as npimport pandas as pddf = pd.DataFrame(np.random.randn(3,4),columns=list('abcd'),index=list('ABC'))df df.a.map(lambda

0.0000

0

4

0

关注作者

收藏

阿抽哥哥

列表、字典与numpy、pandas数据类型间转换关系为何？

首先介绍下数据类型：列表：list是Python的数据类型字典：dict是Python的数据类型numpy：ndarray是numpy的数据类型pandas：series与dataframe是pandas的数据类型接下来以代码形式做介绍：from IPython.core.interactiveshell import InteractiveShellInteractiveShel

114.3933

1

4

0

关注作者

收藏

啊啊啊啊啊吖

齐全！关于R学习的书籍推荐

1.初级入门《An Introduction to R》，这是官方的入门小册子。其有中文版，由丁国徽翻译，译名为《R导论》。《R4Beginners》，这本小册子有中文版应该叫《R入门》。除此之外，还可以去读刘思喆的《153分钟学会R》。这本书收集了R初学者提问频率最高的153个问题。为什么叫153分钟呢？因为最初作者写了153个问题，阅读一个问题花费1分钟时间，全局下来也就是153分钟了。有了

0.0000

0

6

0

关注作者

收藏

啊啊啊啊啊吖

ma模型的预测公式问题

fit=arima(LakeHuron,order=c(0,0,2))fitpredict(fit,n.ahead=2)ma(2)模型的预测值是如何计算得出的？原始序列的最后三个值是：x(1970)=579.31x(1971)=579.89x(1972)=579.96我们要看模型残差。> x x[98]*1.0174 x[97]*0.5

0.0000

0

3

0

关注作者

收藏

啊啊啊啊啊吖

LDA主题模型分析学习分享

最近在学习关于LDA模型的知识，做一些细粒度观点挖掘。在学习过程中发现原来R中还有一个专门的LDA包。我用LDA为两个文本文档建立了一个主题模型，分别是a和B。文档a与计算机科学高度相关，文档B与地球科学高度相关。然后我用这个命令训练lda。text

0.0000

0

2

0

关注作者

收藏

啊啊啊啊啊吖

数据挖掘，你该明白的这几点

商业和生活中，我们处处能够看到数据挖掘的影子：Target 百货分析16岁的少女买无香型沐浴露之后，判断她怀孕了；语言学家通过记录自己孩子出生到3岁每天每秒钟的状态数据，发现语言记忆和周遭环境相关性更大；调查局通过数据分析和挖掘发现改善公共环境有助于降低犯罪率。今天我们将从以下几个方面来揭开数据挖掘的神秘面纱。数据挖掘涉及的学科？a首先我们可以看出，数据分析与挖掘位于中间，

0.0000

0

4

0

关注作者

收藏

啊啊啊啊啊吖

商业分析，我用R

商业智能时代已经全面到来，分析型人才的岗位数量在就业市场中呈现井喷式的增长。无论从事产品研发的工程师，还是从事产品推广的市场人员、人力资源的财务会计人员，都需要掌握数据分析技术，否则很有可能被人工智能时代替代。“工欲善其事，必先利其器”。当前，R和Python等开源软件方兴未艾，但是这类软件学习曲线缓慢，使很多初学者的热情在进入数据分析的核心领域之前就消失殆尽。而商业数据分析的真正目的是为了解

0.0000

0

2

0

关注作者

收藏

啊啊啊啊啊吖

power！用R做动态词云图

Echarts是由百度开发的一款免费、强大的图表生成和可视化库，使其可以方便地对数据进行展示、交互和定制。Recharts是基于Echarts开发的R版本，由Yang Zhou和Taiyun Wei开发，通过该包的echartR函数可以完成很多可视化的任务，图表美观且有动态效果，是一款优秀的数据可视化产品。以下是Recharts绘图的知识地图（基本图形）：a百闻不如一见，今天我们使用一则

0.0000

0

1

0

关注作者

收藏

啊啊啊啊啊吖

选择R做数据分析的几点理由

刚开始学习数据科学的人都会面对同一个问题：我该选择先学习哪种编程语言。不仅仅是编程语言，像SPSS、Modeler、WEKA等软件系统也是同样的情况。有越来越多的工具和编程语言，很难知道该选择哪一种。事实是，你的时间有限。学习一门新的编程语言相当于一项巨大的投资，因此在选择语言时需要有战略性。实际上这个问题没有标准答案，也没有万能的语言可以完成所有的工作，当你入门在入门选择语言时，你需要

0.0000

0

0

0

关注作者

收藏

wangjuju123

随机森林优点和注意点

随机森林算法的注意点：1、在构建决策树的过程中是不需要剪枝的。 2、整个森林的树的数量和每棵树的特征需要人为进行设定。 3、构建决策树的时候分裂节点的选择是依据最小基尼系数的。随机森林有很多的优点：a. 在数据集上表现良好，两个随机性的引入，使得随机森林不容易陷入过拟合。b. 在当前的很多数据集上，相对其他算法有着很大的优势，两个随机性的引入，使得随机森林具有很好的抗噪声

0.0000

0

3

0

关注作者

收藏

wangjuju123

bagging方法bootstrap aggregating的缩写，采用的是随机有放回的选择训练数据然后构造分类器，最后组合。这里以随机森林为例进行讲解。随机森林算法概述随机森林算法是上世纪八十年代Breiman等人提出来的，其基本思想就是构造很多棵决策树，形成一个森林，然后用这些决策树共同决策输出类别是什么。随机森林算法及在构建单一决策树的基础上的，同时是单一决策树算法的延伸和改进。在整

0.0000

0

1

0

关注作者

收藏

wangjuju123

Adaboost是boosting中较为代表的算法，基本思想是通过训练数据的分布构造一个分类器，然后通过误差率求出这个若弱分类器的权重，通过更新训练数据的分布，迭代进行，直到达到迭代次数或者损失函数小于某一阈值。Adaboost的算法流程：假设训练数据集为T={(X1,Y1),(X2,Y2),(X3,Y3),(X4,Y4),(X5,Y5)} 其中Yi={-1,1}1、初始化训练数据的分

0.0000

0

2

0

关注作者

收藏

wangjuju123

集成学习概述

1.1 集成学习概述集成学习在机器学习算法中具有较高的准去率，不足之处就是模型的训练过程可能比较复杂，效率不是很高。目前接触较多的集成学习主要有2种：基于Boosting的和基于Bagging，前者的代表算法有Adaboost、GBDT、XGBOOST、后者的代表算法主要是随机森林。1.2 集成学习的主要思想集成学习的主要思想是利用一定的手段学习出多个分类器，而且这多个分类器要求是弱分

0.0000

0

1

0

关注作者

收藏

<1…382383384…404>

CDA考试动态

CDA报考指南