Spark必背面試題

1,spark的工作機制 用戶在客戶端提交作業後，會由Driver運行main方法並創建SparkContext上下文, SparkContext向資源管理器申請資源, 啓動Execotor進程, 並通過執行rdd算子，形成DAG有向無環圖,輸入DAGscheduler, 然後通過DAGscheduler調度器, 將DAG有向無環圖按照rdd之間的依賴關係劃分爲幾個階段,也就是stage, 輸入t

>>阅读原文<<