spark executor

spark executor Executor是spark任務(task)的執行單元,運行在worker上,可是不等同於worker,實際上它是一組計算資源(cpu核心、memory)的集合。一個worker上的memory、cpu由多個executor共同分攤。併發   spark.executor.cores:顧名思義這個參數是用來指定executor的cpu內核個數,分配更多的內核意味着ex
相關文章
相關標籤/搜索