【Spark】Spark Core 架構原理

1、BDAS: Berkeley Data Analytics Stack 2、Spark和MapReduce的對比   MapReduce Spark 數據存儲結構 磁盤中的HDFS文件系統 使用內存構建彈性分佈式數據集RDD,對數據進行運算和緩存 編程範式 Map+Reduce DAG(有向無環圖):Transformation+Action 中間數據 計算的中間數據需要落入磁盤,IO及序列化
相關文章
相關標籤/搜索