Spark應用程序的監控方式

4040端口 能夠在瀏覽器中打開http://:4040網址,網址顯示的信息:  任務和調度狀態的列表  RDD大小和內存使用的統計信息  正在運行的executor的信息  環境信息  若是在同一臺機器上有多個SparkContext正在運行,那麼他們的端口從4040開始依次增長(4041,4042等)。node 在應用程序運行期間,你能夠在這個Web頁面得到Spark實時監控信息,若是但願在程
相關文章
相關標籤/搜索