scala读取指定列

来源:互联网 发布:做电子音乐的软件 编辑:程序博客网 时间:2024/06/05 07:53

val data = sc.textFile("/home/hadoop/kmeans.txt", 1)

 val parsedData =data.map(s => Vectors.dense(s.split(',').map(_.toDouble)) )

val select = data.map(s=>(for{i<-2 to 3} yield s.split(",")(i).toDouble)).map(_.toArray).map(Vectors.dense(_))
原创粉丝点击