Spark資源調度分配

1、任務調度與資源調度 任務調度:是指通過DAGScheduler,TaskScheduler,SchedulerBackend等進行的作業調度。 資源調度:是指應用程序獲取資源。 任務調度是在資源調度的基礎上,沒有資源調度,那麼任務調度就沒有任何意義了。 2、分配Driver(只對cluster模式有效) Spark的Driver的運行有2種模式,一種是Client模式(Driver程序運行在客
相關文章
相關標籤/搜索