Spark從入門到精通第九課:Spark監控之history-server

一、每個SparkContext都會啓動一個網頁UI,這個網的UI上包含諸如stages/tasks/RDD/executor/配置環境/配置參數等一些許許多多的信息,它默認的地址是http://<driver_node>:4040,當咱們在一個機器上運行了多個SparkContext的時候,除了第一個SparkContext,其他的SparkContext的默認端口就變爲404一、4042。。。
相關文章
相關標籤/搜索