配置YARN

1.配置yarn-site.xml(全部節點)
  路徑:
    /usr/local/hadoop-2.7.3/etc/hadoop/yarn-site.xml
  配置項:
    <property>
      <!-- 指明resourcemanager在什麼地方 -->
      <name>yarn.resourcemanager.hostname</name>
      <value>master</value>
    </property>

    <property>
      <name>yarn.nodemanager.aux-services</name>
      <value>mapreduce_shuffle</value>
    </property>

    <property>
      <name>yarn.nodemanager.auxservices.mapreduce.shuffle.class</name>
      <value>org.apache.hadoop.mapred.ShuffleHandler</value>
    </property>
2.配置mapred-site.xml(全部節點)
  路徑:
    /usr/local/hadoop-2.7.3/etc/hadoop/mapred-site.xml
  配置項目:
    <property>
      <!-- 指明mapreduce跑在什麼框架上,不配默認本機 -->
      <name>mapreduce.framework.name</name>
      <value>yarn</value>
    </property>
  說明:
    默認沒有mapred-site.xml文件,可是有一個mapred-site.xml.template,cp更名一個就行了
3.單獨啓動YARN
  在每一個節點上執行:yarn-daemon.sh
4.一鍵啓動YARN
  在master上執行:start-yarn.sh
5.Web監控地址(8088端口)
  http://192.168.0.104:8088/cluster
  若是啓動不成功,參看"啓動hadoop集羣"裏面寫的"一鍵式啓動"那裏的配置,原理是同樣的,這裏也要配
6.查看每一個node的配置,以及配置來源
  http://nodemanageraddress:8042/conf
  例如:http://192.168.0.105:8042/conf

備註:node

  yarn-site若是是集中啓動,其實只須要在管理機上配置一份便可,可是若是單獨啓動,須要每臺機器一份apache

相關文章
相關標籤/搜索