【SPARK】- RDD操做

spark相關流程 每一個Spark應用都由一個驅動器程序(drive program)來發起集羣上的各類並行操做。驅動器程序包含應用的main函數,驅動器負責建立SparkContext,SparkContext能夠與不一樣種類的集羣資源管理器(Cluster Manager),例如Hadoop YARN,Mesos進行通訊,獲取到集羣進行所需的資源後,SparkContext將獲得集羣中工做節
相關文章
相關標籤/搜索