hadoop配置

来源:互联网 发布:淘宝网双11 编辑:程序博客网 时间:2024/06/17 13:25

1.hadoop-env.sh:

修改JAVA_HOME


2.core-site.xml

配置hdfs的namenode地址与hadoop运行时使用的文件地址

name:fs.defaultFS   value="dfs://xxxxx"

name:hadoop.tmp.dir  value="/xxxxx"


3.hdfs-site.xml

name:dfs.replication  value:1


4.mapred-site.xml

name:mapreduce.framework.name  value:yarn


5.yarn-site.xml

name:yarn.nodemanager.aux-services   value:mapreduce_shuffle

name:yarn.resourcemanager.hostname   value:xxxxx