【工作日記】集羣進程管理yarn + 書寫spark-submit 腳本

一、集羣進程管理yarn 集羣運行spark、hadoop程序，可以通過UI界面查看進程狀態，如圖所示，可登陸到界面查看程序運行狀態。   可以通過application ID查看程序的日誌信息以及輸出信息，如圖，查看logs 2、使用yarn命令查看進程狀態 2.1、kill掉不需要的整個shell程序，（kill掉某個進程進到UI界面的ApplicationMaster，點擊kill的即可以）

>>阅读原文<<