YARN 配置、启动命令、 WEB UI 页面

来源:互联网 发布:java web开发入门 编辑:程序博客网 时间:2024/06/05 20:55
  1. 报错要首先去看日志文件的报错信息
    1. hadoop-2.5.0/logs/查看具体的日志文件
    2. 查看以.log 结尾的文件
  2. 设置reduce 的获取数据的方式,yarn-site.xml

    <property><name>yarn.nodemanager.aux-services</name><value>mapreduce_shuffle</value></property>
  3. 指定 ResourceManager 的位置:(可选项,在哪台机器上运行,默认的就
    是哪台机器) ,yarn-site.xml

    <property><name>yarn.resourcemanager.hostname</name><value>hadoop-senior01.ibeifeng.com</value></property>

    这里写图片描述

  4. 指定 MapReduce 运行在 YARN 上,将 mapred-site.xml.template 改名为 mapred-site.xml

    <property><name>mapreduce.framework.name</name><value>yarn</value></property>

    这里写图片描述

  5. YARN 模块启动

    sbin/yarn-daemon.sh start resourcemanagersbin/yarn-daemon.sh start nodemanager

    这里写图片描述

  6. 通过浏览器访问:
    http://hadoop-senior01.ibeifeng.com:8088/
    这里写图片描述
0 0
原创粉丝点击