mac上搭建hadoop2.3.0云平台

来源:互联网 发布:软件测试知识点总结 编辑:程序博客网 时间:2024/05/01 22:42

开发环境:mac

Hadoop版本:hadoop-2.3.0


Step1:下载解压缩Hadoop,网址是http://hadoop.apache.org,这个应该都没什么问题

Step2:配置Hadoop,我参考了这位前辈的博客http://andy-ghg.iteye.com/blog/1165453,照着做基本没问题,当然可以参考官方配置更好...

Step3:一些问题,目前网上的Hadoop平台搭建中,配置环境都是针对之前几个版本的Hadoop,最近的版本有了较大的变化。

首先,很多人提到在conf目录下对配置文件进行修改,现在版本没有conf,而是在hadoop-2.3.0/etc/hadoop目录下。

其次,运行Hadoop时候,很多人说命令行下输入bin/start-all.sh,现在应该改成sbin/start-all.sh,start-all.sh的目录也改变了

然后,之前的jobtracker结构现在改成了Yarn结构,参见文章http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-yarn/,写的很详细,膜拜下~


照着我提到的几篇文章和我指出的几个问题,在Mac上配置运行应该没有问题...


0 0
原创粉丝点击