Spark學習隨記(1)--介紹及基本概念

Spark集批處理,實時流處理,交互式查詢,機器學習與圖計算於一體,避免了額多種運算場景下需要部署不同集羣帶來的資源浪費。 基礎概念: DAG:有向無環圖(Driected Acyclic ): 大多數現有的集羣計算系統都是基於非循環的數據流模型。即從穩定的物理存儲(如分佈式文件系統)中加載記錄,記錄被傳入由一組確定性操作構成的DAG(Directed Acyclic Graph,有向無環圖),然
相關文章
相關標籤/搜索