Hadoop

来源:互联网 发布:带分数乘除法怎么算法 编辑:程序博客网 时间:2024/05/23 16:16

Hadoop:分布式系统基础架构
HDFS(分布式文件系统)

hdfs架构
配置的位置:
/letv/data/hadoop-2.6.0/etc/Hadoop
配置hdfs-site.xml:
hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS,另一种是QJM(Qurom Journal Manager)。这里我们使用简单的QJM。在该方案中,主备NameNode之间通过一组JournalNode同步元数据信息,一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode

YARN(资源管理器)
yarn架构

主节点ip:50070 是hdfs
主节点ip:8088 是查看运行程序的web ui

0 0