Spark任務執行者之Executor

        此次講的是Executor,啥是Executor呢?Executor是幹什麼的?shell        當咱們在生產環境中提交spark做業時,用spark-submit shell腳本里,每每須要指定一個參數:--num-executors,你能夠指定爲3,5。。。這難道是隨便指定的?愛設多少就設多少?很顯然,答案是no,首先你得根據你集羣的資源狀況來設定。那咱們就有必要來弄清
相關文章
相關標籤/搜索