如何将需要处理的数据加载到项目中Scala项目中

来源:互联网 发布:inodesetup mac 编辑:程序博客网 时间:2024/06/04 18:07

我们需要将需要处理的数据加载到我们的项目中,并且希望将我们处理的结果也显示在项目的数据输出文件夹中,接下来我们介绍一下,我们应该怎样做。
首先,我们的项目中建立数据data文件夹
这里写图片描述
这里写图片描述
我们以同样的步骤,只不过实在data文件夹那里右击,建立input文件件,然后文门在项目中程序存储的位置将数据放入对应的文件夹之后相应的数据集就出现在文件了面了。
这里写图片描述
其次,这条语句就可以调用data文件夹下面,输入数据pg5000。txt的数据

 val textFile = sc.textFile("data/input/chapter10/pg5000.txt")

最后,在程序中我们写代码就可以将我们的显示结果保存到我们的output文件夹中

println("开始保存到文本文件...")    try {      countsRDD.saveAsTextFile("data/output/chapter10/")      println("已经存盘成功")    } catch {      case e: Exception => println("输出目录已经存在,请先删除原有目录");    }

我们执行写好的程序,刷新一下,就可以显示结果!
这里写图片描述
这里写图片描述
这样就完成了数据加载到项目并将输出结果输出,我们可以到对应的程序文件中看到运行结果。

阅读全文
0 0
原创粉丝点击