Spark應用程序的監控方式

4040端口 可以在瀏覽器中打開http://:4040網址，網址顯示的信息：  任務和調度狀態的列表  RDD大小和內存使用的統計信息  正在運行的executor的信息  環境信息  如果在同一臺機器上有多個SparkContext正在運行，那麼他們的端口從4040開始依次增加（4041，4042等）。 在應用程序運行期間，你可以在這個Web頁面獲得Spark實時監控信息，如果希望在程序運行完

>>阅读原文<<