为什么会在pyspark在RDD中调用python第三方库失

PGC123

2019-01-30 阅读量: 779

大数据数据分析师 PySpark

为什么会在pyspark在RDD中调用python第三方库失

扫码加入数据分析学习群

为什么会在pyspark在RDD中调用python第三方库失败？运行pyspark时调用jieba分词，发现可以成功import，但是在RDD中调用分词函数时却提示没有 module jieba，在本地虚拟机时没有这些问题

答：jieba需要在集群中的每个节点上都要安装并且可以使用，还要注意用户及权限问题。

添加CDA认证专家【维克多阿涛】，微信号：【cdashijiazhuang】，提供数据分析指导及CDA考试秘籍。已助千人通过CDA数字化人才认证。欢迎交流，共同成长！

0.0000 0 3 踩关注作者收藏

暂无数据

快速发帖我要提问

数据分析师求职、备考、笔试
刷题神器！

社区福利马上领

社区公告

推荐帖子

CDA持证人阿涛哥
2024-04-140条评论

LangChain.zip ,LangChain.zip data_clear.rar 很奇怪, 有三个资料包Q群下载不了也转发不了

三个资料Q群下载不了也转发不了,先放这里Fine_tuning.zipLangChain.zipdata_clear.rar
CDA持证人阿涛哥
2024-04-010条评论

SQL 语言分类(CDA SQL打卡学习第一次学习笔记)

SQL（结构化查询语言）是一种数据库语言，按照功能分类，有DDL、DQL、DML、DCL、TCL 五大类型，简单了解一下它们分别是做什么用的：（1）DDL（Data Definition Language） DDL是数据定义语言，主要用来定义或者改变表的结构。例如：create、alter、drop、truncate等语句。（2）DQL（Data Query Language） DQL是数据查询语
luoshaoj
2024-03-210条评论

时间序列回归模型！

时间序列回归模型是用于分析时间序列数据的一种模型，主要用于探索数据之间的动态关系和时序特征。以下是时间序列回归模型的主要步骤和要点：1. **数据收集和准备**：首先需要收集时间序列数据，并进行数据清洗和准备工作，包括处理缺失值、异常值和平稳性检验等。2. **建立模型**：确定时间序列回归模型的形式，根据数据特点选择适当的模型，如自回归模型（AR）、滑动平均模型（MA）、自回归滑动平均模型（AR
luoshaoj
2024-03-210条评论

时间序列回归模型！

时间序列回归模型是用于分析时间序列数据的一种模型，主要用于探索数据之间的动态关系和时序特征。以下是时间序列回归模型的主要步骤和要点：1. **数据收集和准备**：首先需要收集时间序列数据，并进行数据清洗和准备工作，包括处理缺失值、异常值和平稳性检验等。2. **建立模型**：确定时间序列回归模型的形式，根据数据特点选择适当的模型，如自回归模型（AR）、滑动平均模型（MA）、自回归滑动平均模型（AR

为什么会在pyspark在RDD中调用python第三方库失

评论(0)

推荐课程

推荐帖子

LangChain.zip ,LangChain.zip data_clear.rar 很奇怪, 有三个资料包Q群下载不了也转发不了

SQL 语言分类(CDA SQL打卡学习第一次学习笔记)

时间序列回归模型！

时间序列回归模型！

为什么会在pyspark在RDD中调用python第三方库失

评论(0)

推荐课程

推荐帖子

LangChain.zip ,LangChain.zip data_clear.rar ​很奇怪, 有三个资料包Q群下载不了也转发不了

SQL 语言分类(CDA SQL打卡学习第一次学习笔记)

时间序列回归模型！

时间序列回归模型！

LangChain.zip ,LangChain.zip data_clear.rar 很奇怪, 有三个资料包Q群下载不了也转发不了