Spark軍師之DAGScheduler

       搬個凳子,捧着瓜子,讓我們開始嘮嗑。       首先,字面解讀下「DAGScheduler」,可以理解爲是一個DAG調度器,DAG又是啥呢?學術名叫:有向無環圖。一個spark應用程序提交,spark引擎就是通過DAGScheduler將其切分成一個個stage。讓我們先來看看DAGScheduler是在哪裏起的作用的。經典圖:     那這個DAGScheduler的職能到底是什
相關文章
相關標籤/搜索