安装Windows下 CDH5开发环境

来源:互联网 发布:mac的强制退出 编辑:程序博客网 时间:2024/05/16 18:48

一,cloudera


http://archive-primary.cloudera.com/cdh5/

二,下载源码包

http://archive-primary.cloudera.com/cdh5/cdh/5/

我在此页面下下载了hadoop-2.6.0-cdh5.4.7-src.tar.gz 与运行环境的版本匹配。

三,hadoop插件


我下载了 hadoop-eclipse-plugin 2.6.0的jar包,使用在cdh5.4.7上无问题。

要注意从github上下载 winutils.exe 和 hadoop.dll



四,创建wordcount


问题一,发现下面的部分找不到jar包

import org.apache.hadoop.mapreduce.Job;import org.apache.hadoop.mapreduce.Mapper;import org.apache.hadoop.mapreduce.Reducer;import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;

解决:在hadoop-2.6.0-cdh5.4.7\share\hadoop\mapreduce2 中添加jar包。

windows通过hadoop-eclipse-plugin插件远程开发hadoop运行mapreduce遇到问题及解决

Hadoop学习三十:Win7 Eclipse调试Centos Hadoop2.2-Mapreduce

0 0
原创粉丝点击