YARN文档概述
来源:互联网 发布:matlab中蚁群算法 编辑:程序博客网 时间:2024/06/03 16:00
1.YARN 结构
文档简介:
Yarn的基本思想是拆分资源管理的功能,作业调度/监控到单独的守护进程
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/YARN.html
2.Hadoop: Capacity 调度
文档简介
本文档介绍了capacityscheduler,hadoop可插拔scheduler 允许多租户安全共享大的集群,他们的应用在分配的能力约束下及时分配资源。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/CapacityScheduler.html
3.Hadoop: Fair 调度
文档简介
这个文档描述了FairScheduler,hadoop可插拔scheduler允许yarn应用fairly共享资源在大集群。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/FairScheduler.html
###########################
上面两个文档详细介绍了hadoop调度方式
4.ResourceManger 重启
文档简介
ResourceManager 是中央权威,管理资源和调度应用运行YARN 。因此,潜在单点故障在YARN 集群。本文给出了概述,重启ResourceManager,一个功能提高ResourceManager 保持运行,对于终端用户使ResourceManager宕机时间不可见。
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/ResourceManagerRestart.html
5.ResourceManager 高可用
文档简介
本指南提供了Yarn的ResourceManager高可用性概述,和详细描述了如何配置和使用这个功能。ResourceManager(RM)负责跟踪资源集群,和调度应用(等MapReduce jobs)。Hadoop 2.4之前,YARN 集群有单点故障。这个高可用功能添加冗余在一个Active/Standby ResourceManager 队的形式,移除这个,否则就是单点故障。
结构:
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/ResourceManagerHA.html
6.YARN 节点Labels
文档简介
节点标签是一种具有相似特性的组节点的方式,应用程序可以指定运行的地方。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/NodeLabel.html
7.Web 应用代理
文档简介
web应用代理是Yarn一部分。默认它运行作为 Resource Manager(RM)一部分,但是可以被配置为运行单机模式
英文网络:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/WebApplicationProxy.html
8.YARN Timeline Server
文档简介
存储和检索当前应用和历史信息以通用的方式在Yarn处理,通过 Timeline Server
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/TimelineServer.html
9.Hadoop: Writing YARN 应用
文档简介
本文档描述了一个高层次的方法来实现Yarn的新应用。
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/WritingYarnApplications.html
10.YARN 命令
文档简介
YARN 命令被bin/yarn脚本调用。运行yarn 没有任何脚本,打印所有命令描述
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/YarnCommands.html
文档简介:
Yarn的基本思想是拆分资源管理的功能,作业调度/监控到单独的守护进程
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/YARN.html
2.Hadoop: Capacity 调度
文档简介
本文档介绍了capacityscheduler,hadoop可插拔scheduler 允许多租户安全共享大的集群,他们的应用在分配的能力约束下及时分配资源。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/CapacityScheduler.html
3.Hadoop: Fair 调度
文档简介
这个文档描述了FairScheduler,hadoop可插拔scheduler允许yarn应用fairly共享资源在大集群。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/FairScheduler.html
###########################
上面两个文档详细介绍了hadoop调度方式
4.ResourceManger 重启
文档简介
ResourceManager 是中央权威,管理资源和调度应用运行YARN 。因此,潜在单点故障在YARN 集群。本文给出了概述,重启ResourceManager,一个功能提高ResourceManager 保持运行,对于终端用户使ResourceManager宕机时间不可见。
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/ResourceManagerRestart.html
5.ResourceManager 高可用
文档简介
本指南提供了Yarn的ResourceManager高可用性概述,和详细描述了如何配置和使用这个功能。ResourceManager(RM)负责跟踪资源集群,和调度应用(等MapReduce jobs)。Hadoop 2.4之前,YARN 集群有单点故障。这个高可用功能添加冗余在一个Active/Standby ResourceManager 队的形式,移除这个,否则就是单点故障。
结构:
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/ResourceManagerHA.html
6.YARN 节点Labels
文档简介
节点标签是一种具有相似特性的组节点的方式,应用程序可以指定运行的地方。
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/NodeLabel.html
7.Web 应用代理
文档简介
web应用代理是Yarn一部分。默认它运行作为 Resource Manager(RM)一部分,但是可以被配置为运行单机模式
英文网络:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/WebApplicationProxy.html
8.YARN Timeline Server
文档简介
存储和检索当前应用和历史信息以通用的方式在Yarn处理,通过 Timeline Server
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/TimelineServer.html
9.Hadoop: Writing YARN 应用
文档简介
本文档描述了一个高层次的方法来实现Yarn的新应用。
英文网址
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/WritingYarnApplications.html
10.YARN 命令
文档简介
YARN 命令被bin/yarn脚本调用。运行yarn 没有任何脚本,打印所有命令描述
英文网址:
http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/YarnCommands.html
0 0
- YARN文档概述
- YARN-01-YARN概述
- YARN概述
- Yarn框架概述
- Hadoop - YARN 概述
- yarn架构-概述
- yarn fair scheduler 之概述
- Hadoop -YARN 应用程序设计概述
- YARN系统官方文档翻译
- YARN/MRv2 MRAppMaster深入剖析—概述
- Hadoop 2.0 (YARN)中的安全机制概述
- Apache Hadoop YARN – 背景及概述
- Apache Hadoop YARN: 背景及概述
- APACHE HADOOP YARN –背景和概述
- 【概述】Hadoop、Yarn、Spark基本…
- Apache YARN各组件功能概述
- Spark on YARN分布式部署文档
- 内核开发文档----概述
- 大数据量高并发的数据库优化
- 收藏的文章
- 为网站加入Drupal星球制作RSS订阅源
- 中国智慧景区联盟今日成立 发布《中国智慧景区九寨沟宣言》
- DBA的技能图谱
- YARN文档概述
- swift初见
- iptables的详细介绍及配置方法
- oracle的批量插入
- Android使用shape设置虚线、圆角、渐变
- 深入分析JavaWeb 13 -- jsp指令详解
- 基于@Aspect的AOP注解配置
- 基于注解的SpringMVC简单介绍
- Iptables 指南 1.1.19