SparkContext的初始化機制

1. createTaskScheduler():創建SparkScheduler,SparkDeploySchedulerBackend(它在底層負責接收TaskSchedulerImpl的控制,實際上負責與Master的註冊,Executor的反註冊,task發送到Executor等操作),調用TaskSchedulerImpl的init()方法,創建SchedulePool,它有不同的優先策
相關文章
相關標籤/搜索