Spark流程的內部實現

Spark流程的內部實現 1 Spark核心組件回顧 1.1 Driver Spark驅動器節點,用於執行Spark任務中的main方法,負責實際代碼的執行工作。Driver在Spark作業執行時主要負責: 將用戶程序轉化爲job 在executor中間進行調度任務(task) 跟蹤executor的執行情況 通過UI展示查詢運行情況 1.2 Executor Executor實際上是一個JVM進
相關文章
相關標籤/搜索