啓動hadoop後jps存在nodemanager進程,但立刻會報錯中斷進程
查看日誌後發現報的是啓動nodemanager 所需內存不足node
2017-09-27 18:25:11,244 INFO org.apache.hadoop.service.AbstractService: Service NodeManager failed in state STARTED; cause: org.apache.hadoop.yarn.exceptions.YarnRuntimeException: org.apache.hadoop.yarn.exceptions.YarnRuntimeException: Recieved SHUTDOWN signal from Resourcemanager ,Registration of NodeManager failed, Message from ResourceManager: NodeManager from master doesn't satisfy minimum allocations, Sending SHUTDOWN signal to the NodeManager.
按照查來的方法修改 yarn-site.xml 中的yarn.scheduler.minimum-allocation-mb 內存大於1024,表示該節點上YARN可以使用的物理內存總量,默認是8192(MB),注意,若是你的節點內存資源不夠8GB,則須要調減少這個值,而YARN不會智能的探測節點的物理內存總量。apache
<property> <name>yarn.nodemanager.resource.memory-mb</name> <value>1024</value> </property>
不起做用,還有的說法是修改修改 yarn-env.sh 中 JAVA_HEAP_MAX=-Xmx3072m 改成3G
可是也是不起做用的
我架設的虛擬機是1g內存1CPU1核的
在yarn-site.xml添加oop
<property> <name>yarn.nodemanager.resource.cpu-vcores</name> <value>1</value> </property>
表示該節點上YARN可以使用的虛擬CPU個數,默認是8,注意,目前推薦將該值設值爲與物理CPU核數數目相同。若是你的節點CPU核數不夠8個,則須要調減少這個值,而YARN不會智能的探測節點的物理CPU總數。
終於可以成功啓動!!日誌