热线电话:13121318867

登录
2019-01-31 阅读量: 739
RDD转Dataset?

RDD如何转Dataset?

答:

定义每一行的类型(case class)时,需要给出字段名和类型,后面只要往case class里面添加值即可

import spark.implicits._
case class Coltest(col1:String,col2:Int)extends Serializable //定义字段名和类型

val testDS = rdd.map {line=>
Coltest(line._1,line._2)
}.toDS

0.0000
1
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子