Spark學習筆記(1)——Spark架構和主要特徵

Spark是一個分佈式內存計算框架。關鍵詞:分佈式,內存。所以學習它要學習它的分佈式架構以及它實現高速並行計算的機理。node 架構 主從結構 所謂分佈式就是網絡中多個主機上能夠同時協同工做。全部的分佈式框架,不管用於存儲仍是計算,分佈式結構是前提。大部分分佈式框架都是主從式結構。(HDFS是namenode-datanode,YARN是ResourceManager-NodeManager. )
相關文章
相關標籤/搜索