Spark2.2源碼之資源調度機制

#Spark2.2源碼之資源調度機制java 注意:須要被分配資源的對象是:Driver,資源指的是Executor,Executor包含了cpu以及內存 。web 大概流程: Standalone和yarn client都是不須要註冊的,會再本地啓動Driver,因此這裏講的是yarn cluster模式。調度以前,確定是要拿到全部須要被調度的對象,因此應該看一下Driver的提交機制算法 一、
相關文章
相關標籤/搜索