eclipse spark源码编译部署

来源:互联网 发布:播放视频录音软件 编辑:程序博客网 时间:2024/06/12 20:19

1.安装Scala

2.安装sbt

3.安装Scala IDE   http://scala-ide.org/download/current.html (要注意eclipse和Scala IDE的版本匹配问题,网页上有说明)

4.下载Spark源代码: Git中运行 

D:\Spark\gitCode> git clone https://github.com/apache/spark

5.启动sbt:

windows下:cmd——cd D:\Spark\gitCode\spark(源码下载地址)——sbt

Linux下:cd $spark(源码下载地址)——sbt/stb

6.生成eclipse工程文件: 在sbt提示符下输入eclipse

7.用eclipse导入生成的工程文件,并加入lib_managed目录下的jar包

0 0
原创粉丝点击