hadoop 网页监控

来源:互联网 发布:淘宝店铺怎么释放 编辑:程序博客网 时间:2024/06/05 20:48

hadoop 50030端口不可用

  • 问题:使用网页监控作业的时候发现50030端口不可用,50070却是可用的。
  • 感觉应该是版本的问题,不知道什么版本开始,作业的资源管理器变成了yarn,所以作业的端口变了,变成了8088,应该是这样的,个人yy
  • 之前我配置的hadoop中没有任何yarn的配置。
<!-- mapred-site.xml --><property>    <name>mapreduce.framework.name</name>    <value>yarn</value></property><!--下面不是必须的--><property>    <name>mapreduce.jobhistory.address</name>    <value>localhost:10020</value></property><property>    <name>mapreduce.jobhistory.webapp.address</name>    <value>localhost:19888</value></property>
<!--yarn-site.xml--><property>    <name>yarn.nodemanager.aux-services</name>    <value>mapreduce_shuffle</value></property><!--下面不是必须的--><property>    <name>yarn.nodemanger.aux-services.mapreduce.shuffle.class</name>    <value>org.apache.hadoop.mapred.ShuffleHandler</value></property>
###.bashrcexport YARN_HOME=$HOME/hadoop-2.7.1export YARN_CONF_DIR=$HOME/hadoop-2.7.1/etc/hadoop
#启动historystart-dfs.shstart-yarn.shsbin/mr-jobhistory-daemon.sh start historyserver
0 0