在eclipse中部署spark源代码

来源:互联网 发布:淘宝网上手机 编辑:程序博客网 时间:2024/06/07 07:45

参考:

http://cn.soulmachine.me/blog/20130611/

http://scala-ide.org/download/current.html


1.安装scala

2.安装sbt

3.安装Scala IDE   http://scala-ide.org/download/current.html (要注意eclipse和Scala IDE的版本匹配问题,网页上有说明)

4.下载spark源代码: git clone git://github.com/apache/spark.git

  http://spark.apache.org/downloads.html

5.启动sbt:

windows下:cmd——cd $spark——sbt

Linux下:cd $spark——sbt/stb

6.生成eclipse工程文件: 在sbt提示符下输入eclipse

7.用eclipse导入生成的工程文件,并加入lib_managed目录下的jar包

0 0