Ubuntu+Eclipse+SparkStreaming

hadoop集群搭建 ： 链接
spark集群搭建：链接

官方链接

在用maven add dependencies的时候，出了各种error, 各种couldn’t transfer from…. 各种couldn’t read…not find zip file之类的，以下是解决办法：

1. update： update项目，update maven, update dependencies, 强制update
2. 重启eclipse
3. 删除.m/repository目录下所有，重新添加dependencies.

总之就是不断的删了重装，刷新…..

后来，项目里有一个.scala文件编译有红叉叉，我没有管它，跑别的程序的时候就出现了无法加载主类的error. 后来才知道原来会互相影响。