Spark-01

一、必須知道         SparkContext         sparkContext在Spark應用程序的執行過程中起着主導作用,它負責與程序和spark集羣進行交互,包括申請集羣資源、創建RDD、accumulators及廣播變量等。sparkContext與集羣資源管理器、work節點交互圖如下:     sparkContext構建的頂級三大核心:DAGScheduler,Tas
相關文章
相關標籤/搜索