spark on yarn圖形化任務監控利器:History-server幫你理解spark的任務執行過程

在spark on yarn任務進行時,大家都指導用4040端口監控(默認是,設置其他或者多個任務同時會遞增等例外); 辣麼,任務結束了,還要看圖形化界面,那就要開history-server了。CDH安裝spark on yarn的時候,就自動安裝了history的實例。 現在不用CDH自帶的spark(版本太久了),自己安裝spark新版,所以還得具體配置。 搜了一下帖子,2個步驟: spar
相關文章
相關標籤/搜索