hadoop环境搭建(三)分布式
来源:互联网 发布:word mac 编辑:程序博客网 时间:2024/05/16 13:52
在前两篇的配置基础上:
修改mapred-site.xml
添加
<property>
<name>mapreduce.jobhistory.address</name>
<value>hadoop1:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>hadoop1:19888</value>
</property>
修改yarn-site.xml
<property>
<name>yarn.resourcemanager.hostname</name>
<value>hadoop1</value>
</property>
修改slaves
添加
hadoop2
hadoop3
hadoop4
删除tmp目录下的内容;
将hadoop复制到hadoop2、hadoop3、hadoop4上。
配置四台机器之间的免密登录(见hadoop环境搭建(一)
在hadoop上格式化namenode
$ hdfs namenode -format
启动服务
$ start-all.sh
启动历史服务
$ mr-jobhistory-daemon.sh start historyserver
查看服务
namenode节点上:$ jps
2475 JobHistoryServer
1851 NameNode
2041 SecondaryNameNode
3093 Jps
2182 ResourceManager
datanode节点上: $ jps
2749 DataNode
2851 NodeManager
4636 Jps
- hadoop环境搭建(三)分布式
- 搭建Hadoop分布式开发环境(三)
- 伪分布式Hadoop及开发环境搭建(三)
- 【大数据】开发环境搭建(三):hadoop伪分布式集群环境搭建(下)
- hadoop-分布式环境搭建
- Hadoop分布式环境搭建
- Hadoop分布式环境搭建
- hadoop分布式环境搭建
- Hadoop分布式环境搭建
- hadoop 分布式环境搭建
- 搭建分布式Hadoop环境
- Hadoop 分布式环境搭建
- hadoop环境搭建(二)伪分布式
- Hadoop伪分布式环境搭建(一)
- Hadoop伪分布式环境搭建(二)
- hue搭建(hadoop分布式环境)
- 搭建Hadoop分布式开发环境(一)
- 搭建Hadoop分布式开发环境(二)
- 内部类
- 22. Generate Parentheses
- DOM的一些方法和属性
- WCF测试客户端(WcfTestClient)
- UML图示
- hadoop环境搭建(三)分布式
- beginBackgroundTaskWithExpirationHandler
- 连接数据库JDBC
- javaweb
- linux硬链接和软链接的区别
- 数字信号处理基础-DFT、IDFT
- debug
- 雅典娜
- ubuntu 手动安装 mysql