2019-01-31
阅读量:
1092
RDD转Dataset?
RDD如何转Dataset?
答:
定义每一行的类型(case class)时,需要给出字段名和类型,后面只要往case class里面添加值即可
import spark.implicits._
case class Coltest(col1:String,col2:Int)extends Serializable //定义字段名和类型
val testDS = rdd.map {line=>
Coltest(line._1,line._2)
}.toDS
0.0000
0
1
关注作者
收藏
评论(0)
发表评论
暂无数据
推荐帖子
0条评论
0条评论

