使用Yarn(可选)

来源:互联网 发布:中国有多少富二代知乎 编辑:程序博客网 时间:2024/06/03 19:00

使用Yarn(可选)

etc/hadoop/mapred-site.xml
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>

etc/hadoop/yarn-site.xml
<property> 
<name>yarn.nodemanager.aux-services</name> 
<value>mapreduce_shuffle</value> 
</property>
如果不配置会报如下错误:

org.apache.hadoop.yarn.exceptions.InvalidAuxServiceException: The auxService:mapreduce_shuffle does not exist

针对的是hadoop2.7.2+hive2.1.1+sqoop1.4.6