Spark程序監控

4040端口 能夠在瀏覽器中打開http://:4040網址，網址顯示的信息： 任務和調度狀態的列表 RDD大小和內存使用的統計信息 正在運行的executor的信息 環境信息 若是在同一臺機器上有多個SparkContext正在運行，那麼他們的端口從4040開始依次增長（4041，4042等）。node 在應用程序運行期間，你能夠在這個Web頁面得到Spark實時監控信息，若是但願在程序運行完之

>>阅读原文<<