spark 架構

spark簡介: 1,spark 做爲數據分析的一種平臺,沒有數據存儲,強調的是基於內存的(相當吃內存)數據分析,內存不夠也會磁盤進行計算! 2,可以運行很多的資源管理平臺之上,比如 yarn spark 的啓動: 1,通過spark-shell 進行啓動(Standalone模式) #整個集羣的 cpu 核數,單個節點的的內存 # 指定 master 相當
相關文章
相關標籤/搜索