在eclipse下跑第一个map-reduce程序-转载分享
来源:互联网 发布:中国网络保险大学下载 编辑:程序博客网 时间:2024/06/17 16:05
不得不说从一个linux,hadoop通通0起步的菜鸟,到在eclipse下跑第一个map reduce程序这一步,真的有够累的,双系统装ubuntu,jdk,eclipse,ant,hadoop各种安装配置,hadoop在命令行下运行,hadoop-eclipse-plugin编译,各种google baidu。
以上的步骤都搞完后,特别是将hadoop-eclipse-plugin.1.2.1.jar这个插件放到eclipse下面的plugins文件夹后,就可以准备开始在eclipse下面运行hadoop程序了。当然只是准备开始,因为还要配置eclipse,具体可以参考文献[1],讲的非常的详细。
这里只是补充下我配置时候出现的问题。
1:run程序后出现****permission denied**的错误,检查下,原来是又犯了上一篇博文提到的低级错误,我用另外一个帐号(没有操作hadoop文件权限)在运行eclipse,结果自然没有权限对hadoop下面的文件进行操作。
2:input path doesn't exist.......这里也是自己犯的低级错误,在配置输入输出路径的参数那里输入错了,修改过来即可。
最后再share两篇文章[2,3],详细介绍了从单机到真正集群的配置。不过尚没有验证,先玩一段时间单机再上集群吧。
Reference:
(1) http://phz50.iteye.com/blog/932373
(2)http://blog.csdn.net/xw13106209/article/details/6855962
(3)http://wenku.baidu.com/view/c0c0ed3a580216fc700afd44
- 在eclipse下跑第一个map-reduce程序-转载分享
- WordCount------自己写的第一个map/reduce程序------
- 第一个完整的Map/Reduce小程序
- hadoop学习之第一个Map/Reduce程序
- 第一个完整的Map/Reduce小程序
- 【Struts2】在eclipse下搭建第一个程序
- 我的第一个map/reduce 作业
- 开始玩hadoop7--hadoop 2.6.0 在eclipse里安装(第一个map程序)
- [转载]Hadoop学习全程记录——在Eclipse中运行第一个MapReduce程序
- eclipse下运行第一个hadoop程序
- eclipse 第一个程序
- 转载 Map Reduce
- 自己完成的第一个Map-Reduce, 类似模板匹配
- hadoop——在命令行下编译并运行map-reduce程序
- Linux下使用Eclipse开发第一个C++程序
- Eclipse下建立第一个Servlet程序步骤
- ubuntu 下安装eclipse+cdt 并开发第一个程序
- eclipse下开发第一个flask web程序
- RegExp.$1--RegExp.$9
- 校招季——Python笔记一
- jdk和maven安装后遇到的一些问题
- 要再次显示该网页 Internet Explorer 需要重新发送您以前提交的信息
- 并查集--小希的迷宫
- 在eclipse下跑第一个map-reduce程序-转载分享
- 工作-学习-生活状态
- 二.单向链式存储线性表
- DB2之SP(存储过程)
- 内存泄露检测工具比较
- VS2010开发和部署Sharepoint EventHandler。
- hdu 2151- DP Worm
- HDOJ 1160
- ASP.NET手机号码格式验证js版