spark的做業提交流程

spark的做業調度分爲3個級別:DAG調度器 ==>TaskScheduler(任務調度器)==> SchedulerBackend(後臺調度器)shell   第一級做業調度:DAG調度器DAGScheduler框架 當咱們寫好應用程序,程序裏面有sc.count()或sc.collect()時,或者咱們在scalashell發出的命令中有sc.count()或sc.collect()時(這倆
相關文章
相關標籤/搜索