Spark 集羣概述

本篇博客簡述 Spark 集羣相關的概念。 概述 Spark 的"集羣"不是提供運算服務的,而是一種資源分配的調度器。 執行任務的 Spark 進程作爲客戶端向"集羣"申請資源(運算節點), "集羣"分配資源以後, 這個 Spark 進程會分解一些計算工作,並把他們放到這些申請來的資源中運行。 提交給 Spark 執行的工作稱做 application(應用),對應的主程序稱作:driver pr
相關文章
相關標籤/搜索