Spark性能調優

2019獨角獸企業重金招聘Python工程師標準>>> 通常我們對一個系統進行性能優化無怪乎兩個步驟——性能監控和參數調整，本文主要分享的也是這兩方面內容。 性能監控工具 【Spark監控工具】 Spark提供了一些基本的Web監控頁面，對於日常監控十分有用。 1. Application Web UI http://master:4040（默認端口是4040，可以通過spark.ui.port修

>>阅读原文<<