Spark學習之路——5.Spark UI

一、Spark UI解讀 Jobs頁面可以看到所有Jobs的執行情況,job的數量取決於action算子的數量。 Stages頁面列出所有Stage的執行情況。Spark stage切分是按照寬依賴來區分的,因此粒度上要比job更細一些。 Storage頁面顯示所做的cache persist等操作。 Environment頁面裏面展示了當前spark所依賴的環境,比如jdk,lib等等 Exec
相關文章
相關標籤/搜索