hadoop2.7.1配置备忘
来源:互联网 发布:数据不可信的 英文 编辑:程序博客网 时间:2024/05/23 13:55
1、hadoop-env.sh
# 开启自动同步代码,当重启master时,master机器上的hadoop代码同步到各台slaves上export HADOOP_MASTER=master:$HADOOP_HOMEexport HADOOP_SLAVE_SLEEP=0.1export JAVA_HOME=$JAVA_HOME # 前提是JDK环境变量已配置,chk:echo $JAVA_HOME
2、core-site.xml
<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name>fs.defaultFS</name> <value>hdfs://master:9000</value> </property></configuration>
3、hdfs-site.xml
<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name>dfs.namenode.name.dir</name> <value>/hadoop/hdfs/namenode</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>/hadoop/hdfs/datanode</value> </property></configuration>
4、mapred-site.xml
<?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property></configuration>
5、yarn-site.xml
<?xml version="1.0"?><configuration> <property> <name>yarn.resourcemanager.scheduler.address</name> <value>master:8030</value> </property> <property> <name>yarn.resourcemanager.resource-tracker.address</name> <value>master:8031</value> </property> <property> <name>yarn.resourcemanager.address</name> <value>master:8032</value> </property> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property></configuration>
6、slaves
slave1
0 0
- hadoop2.7.1配置备忘
- hadoop2.7.1 HA配置
- hadoop2.7.1伪分布式配置
- Hadoop2.7.1安装与配置
- (转载)Hadoop2.7.1配置
- hadoop2.7.1集群配置过程
- linux下hadoop2.7.1配置注意事项
- 初学hadoop2.7.1(一)配置单点模式
- 初学hadoop2.7.1(二)配置伪集群
- Ubuntu系统下配置Hadoop2.7.1
- # hadoop2.7.3-spark2.0.2集群部署(备忘)
- Hadoop2.0 配置详解
- hadoop2.0.5配置
- hadoop2.2.0 配置
- hadoop2.2安装配置
- hadoop2.2.0 singlenode 配置
- hadoop2.3.0安装配置
- Hadoop2 基本配置教程
- 创还原表空间
- 音乐播放
- 解决内网远程连接MySQL速度慢
- HDU 1495非常可乐(BFS)
- iOS开发 - StoryBoard
- hadoop2.7.1配置备忘
- IOS 编码规范
- 启动页
- 设计模式:建造者模式(Builder)
- iOS开发 - Masonry
- bzoj 4241: 历史研究 分块
- 微信上传图片和图片存储
- 为什么要实现Serializable
- 创临时表空间