Spark任務執行過程簡介

--executor-memory 每個executor使用的內存大小 --total-executor-cores    整個application使用的核數網絡 1.提交一個spark程序到spark集羣,會產生哪些進程?     SparkSubmit(也叫作Driver),主要做用是提交任務,也能夠調度任務     Executor    用於執行須要計算的任務      2.在提交spa

>>阅读原文<<