打印rdd

来源:互联网 发布:淘宝闲鱼官网 编辑:程序博客网 时间:2024/06/05 09:35

###统计wordcount单词,并打印出来

valsplitfile=sc.textFile("/a.txt")

valwordcounts=splitfile.flatMap(x=>x.split("\t")).map(word=>(word,1)).reduceByKey(_+ _)

wordcounts.collect().foreach {println}

 

wordcounts.take(3).foreach {println}   ## 打印前三行记录