spark編程模型與基本架構圖

1. spark編程模型 Spark應用程序從編寫到提交、執行、輸出的整個過程如圖2-5所示,圖中描述的步驟如下。 0)用戶使用SparkContext提供的API(常用的有textFile、sequenceFile、runJob、stop等)編寫Driver application程序。 1)Cluster Manager:Spark的集羣管理器,主要負責資源的分配與管理。集羣管理器分配的資源屬
相關文章
相關標籤/搜索