热线电话:13121318867

登录
2020-02-22 阅读量: 765
如何创建RDD?

创建RDD有三种方式:


1、可以从一个Scala集合里面创建:
sc.parallelize(data):把data这个数据并行化分片到节点
sc.makeRDD(data):把data这个数据并行化分片到节点,它的实现就是parallelize
sc.makeRDD(data[(T,seq)]):这种方式可以指定RDD的存放位置


2、根据外部数据源来创建,如sc.textFile("path")


3、根据另一个RDD转换过来


0.0000
2
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子