YARN搭建与启动
来源:互联网 发布:知乎怎么看阅读量 编辑:程序博客网 时间:2024/06/07 19:28
一、架构
二、环境搭建
cd /home/hadoop-2.5.1/
cd etc/hadoop
vim yarn-site.xml
<property>
<name>yarn.resourcemanager.ha.enabled</name>
<value>true</value>
</property>
<property>
<name>yarn.resourcemanager.cluster-id</name>
<value>yarncluster</value>
</property>
<property>
<name>yarn.resourcemanager.ha.rm-ids</name>
<value>rm1,rm2</value>
</property>
<property>
<name>yarn.resourcemanager.hostname.rm1</name>
<value>node1</value>
</property>
<property>
<name>yarn.resourcemanager.hostname.rm2</name>
<value>node5</value>
</property>
<property>
<name>yarn.resourcemanager.webapp.address.rm1</name>
<value>node1:8088</value>
</property>
<property>
<name>yarn.resourcemanager.webapp.address.rm2</name>
<value>node5:8088</value>
</property>
<property>
<name>yarn.resourcemanager.zk-address</name>
<value>node1:2181,node3:2181,node4:2181</value>
</property>
vim mapred-site.xml
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
vim yarn-site.xml
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
三、启动YARN
start-yarn.sh
在备用的节点上启动resourcemanager
yarn-daemon.sh start resourcemanger
YARN是粗粒度模式(Coarse-grained Model)。粗粒度和细粒度(Fined-grained)的区别见这篇文章。
- YARN搭建与启动
- Yarn的配置与启动
- IIS搭建与启动
- Hadoop 2.0+YARN启动脚本分析与实战经验
- Hadoop 2.0+YARN启动脚本分析与实战经验
- Hadoop 2.x环境搭建之三配置部署启动YARN及在YARN上运行MapReduce程序
- Hadoop - YARN 启动流程
- Hadoop 启动 YARN
- Hadoop Yarn 集群搭建
- YARN的HA搭建
- yarn的HA搭建
- Hadoop+yarn搭建
- hadoop Yarn 搭建集群时错误 主节点 NameNode 没有启动成功
- Zookeeper集群搭建与启动
- beego 项目搭建与启动
- Solr7的搭建与启动
- YARN 中 Container 的启动
- jstorm-yarn 启动流程总结
- 简单的数组升序以及降序 以及去重的写法
- onhup命令可以忽略HUG信号
- 关于Varnish和CDN的一些配置解释
- Java迷你DVD管理系统
- 插入排序
- YARN搭建与启动
- Linux 安装Apache 记录
- 数据库连接池(5)其他数据库连接池
- Tomcat
- Timers之基础篇
- 以面向对象思想写一个js函数
- 指针的类型 指针所指向 指向指针的引用
- 织梦模板下载:驾驶学校汽车类行业网站织梦模板
- 汇编常用指令笔记