一分鐘教你看懂 Spark的體系架構

1、Spark集羣的體系結構 官方的一張圖:       組件 Spark應用程序在羣集上作爲獨立的進程集運行,由SparkContext 主程序中的對象(稱爲驅動程序)協調。 具體來說,要在集羣上運行,SparkContext可以連接到幾種類型的集羣管理器 (Spark自己的獨立集羣管理器Mesos或YARN),它們可以在應用程序之間分配資源。連接後,Spark會在集羣中的節點上獲取執行程序,這
相關文章
相關標籤/搜索