大数据-数据科学专业问答社区-CDA答疑社区

热线电话：13121318867

登录

PGC123

机器学习训练后的模型如何保存？

机器学习训练后的模型如何保存？答：使用机器学习算法在训练数据上训练出的模型必须要导出来的，因为训练过程是比较耗时的，我们不可能每次使用模型做预测或者分类的时候再训练一次。模型保存如何实现呢？以scikit-learn 为例：首先训练一个模型# 训练svm模型from sklearn import svmfrom sklearn import datasetsclf=svm.SVC(

29.5834

2

3

0

关注作者

收藏

PGC123

pyecharts无法在jupyterlab中显示问题

pyecharts无法在jupyterlab中显示问题。我的代码运行后并不能绘制出图像来，我是使用jupyter lab运行代码的，用notebook就可以。答：不同的 Notebook 环境有自己不同的渲染要求，pyecharts 在底层做了适配处理，但因为我们无法在import pyecharts的时候知道用户具体使用的是哪种 Notebook 环境，所以需要用户在使用时在顶部声明环境类

30.5863

3

2

0

关注作者

收藏

PGC123

安装python包提示vc 14.0错误

安装python包提示vc 14.0错误答：很多python的第三方库是使用C 开发的，因此安装编译环节对编译环境有一定的要求。在windows下一般使用微软的C 编译工具，这个错误就是缺少编译工具导致的，可以去微软官网下载安装编译工具即可解决问题。这里我也给大家准备了一个百度云盘的链接，有需要的可以下载一下。链接：https://pan.baidu.com/s/1SKpY

23.6332

2

1

0

关注作者

收藏

PGC123

在做词云图的时候缺少字体文件

在做词云图的时候缺少字体文件C:/Windows/Fonts/STLITI.ttf 是不是没有这种 pyechart ERROR: Could not find a version that satisfies the requirement pyechart (from versions: none)ERROR: No matching distribution found for p

24.9443

3

3

0

关注作者

收藏

PGC123

如何快捷稳定的安装python的第三方包？

如何快捷稳定的安装python的第三方包？答：anaconda 已经给我们提供了大量的数据分析相关python工具包，但是这还远远不够，因此需要我们额外安装。当我们使用pip 安装时由于默认服务器在国外，因此很容易造成各种timeout httpError问题，如果使用国内的镜像服务器那该多好。如何使用呢？命令行，或者jupyter notebook pip in

23.6332

2

1

0

关注作者

收藏

PGC123

安装完anaconda闪退-sqlite3问题

我在公司电脑上装的Anaconda3（32位）怎么一点启动一闪就没了这是什么原因呢？答：从报错信息来看软件缺少了相关DLL，因此首先想到的是重装anaconda（对于初学者，这是个解决问题的好办法），但是没能奏效。然后认真看了下报错，是在import sqlite3的时候报的错，因此查阅文档，最后发现这是因为anaconda的DLLs文件夹下没有sqlite3.dll的原因

24.0120

3

4

0

关注作者

收藏

大魔王泛泛

解释一下图中Spark里的hive-site配置信息

hive.metastore.uris thrift://localhost:9083 spark中hive-site里这个配置信息是为了spark能访问到hive的元数据库而配置的

1.6049

1

2

0

关注作者

收藏

大魔王泛泛

如何解决图中的hive报错？

图中报错是因为没有开启元数据库执行命令：hive--service metastore

1.6049

1

2

0

关注作者

收藏

大魔王泛泛

如何解决图中java报错？

图中报错信息的解决方案：因为没有开启zookeeper服务执行命令：zkServer.sh start

1.6049

1

3

0

关注作者

收藏

大魔王泛泛

Hive的数据是存储在哪里的？

hive操作的是HDFS上的数据 hive本身并不存储数据

1.6049

1

3

0

关注作者

收藏

大魔王泛泛

Sqoop 从mysql导入HDFS数据命令

sqoop import --connect jdbc:mysql://master:3306/batch --username hive -password hive --table RawDataForComparing -m 6 --split-by id -target-dir '/usr/hive/RawDataForComparing' --delete-target-dir

0.0000

0

1

0

关注作者

收藏

大魔王泛泛

Hive是数据库吗？

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析

30.0000

1

0

0

关注作者

收藏

大魔王泛泛

mysql里的hive数据库是哪一部建立的？

是在启动hive时自动创建的

0.0000

0

3

0

关注作者

收藏

大魔王泛泛

简述一下什么是Hive？

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行

0.0000

0

3

0

关注作者

收藏

大魔王泛泛

伪分布和分布式有什么区别？

伪分布：不是真正的分布式是将多台机器的任务放到一台机器运行分布式：是将一个作业进行拆分，分别在不同的机器上运行，能快速的处理作业。

30.0000

1

2

0

关注作者

收藏

PGC123

python如何实现中值滤波？

python如何实现中值滤波？答：scipy中已经实现了该方法，主要用于图像的预处理过程。用法如下：import scipy.signal as signalsignal.medfilt(数据,kernel_size)一般图像的时候 kernel_size是二维元组。如果是一维的数据可以给kernel_size传入一元组signal.medfilt([1,2,3,4,5,6,7,

12.0875

2

2

0

关注作者

收藏

PGC123

unexpected EOF while parsing？

代码出现如下报错 unexpected EOF while parsing？File "", line 1 signal.medfilt(data_01_.iloc[:,1],kernel_size=(5,) ^S

19.6153

2

5

0

关注作者

收藏

PGC123

我想做个循环，求每列最后一个值减去第一个值循环写不对

我想做个循环，求每列最后一个值减去第一个值循环写不对代码是这么写的：c=[]for i in data_01_.columns: new=data_01_.iloc[:10,i].mean()-data_01_.iloc[-10,i].mean() c.append(new)我感觉我现在有点晕，不知道怎么才对了答：这个代码的问题是你的索引错了冒号丢

19.9941

3

0

0

关注作者

收藏

PGC123

chromedriver' 路径没有添加到path报错

老师，我想问下，这个报错是什么意思？答： WebDriverException:Message:'chromedriver'executable needs to be in PATH. 这个报错的意思是说你的chromedriver程序的路径没有添加到环境变量中，所以。所以需要将该程序所在的文件夹地址添加到环境变量 path中即可解决问题。

16.4240

1

2

0

关注作者

收藏

PGC123

爬虫时，代码报错提示变量未定义问题。

爬虫函数这边遇到了个问题运行显示没有定义这个是什么错？函数是这样的网上找了好多教程还是没解决答：结合代码与报错信息来看，这是变量作用域导致的问题。函数get_baby_one_page()是无法访问外部的browser对象的。需要在定义函数的时候添加一个参数。代码可以这样#定义函数的时候添加变量def get_baby_one_page(browser): df

16.4240

1

3

0

关注作者

收藏

<1…212223…75>

CDA考试动态

CDA报考指南