Spark十二 集羣運行

1 運行時架構 1) 驅動器節點Driver     驅動器程序的兩個功能     > 把用戶程序轉化爲任務         (1) 驅動器程序把用戶程序轉爲多個物理執行單元,稱爲任務            (2) 程序從輸入數據創建一系列RDD,轉化操作生成新的RDD,最後執行行動操作         (3) 由操作隱式創建邏輯有向無環圖,驅動器運行時把DAG轉爲物理執行計劃         (
相關文章
相關標籤/搜索