Spark程序運行架構

1.Driver Application : Spark運行程序。 2.Cluster Manager:集羣管理器。 3.Worker:工作節點。 4.Executor:執行器。 5.Task:任務。 注意:在Spark2.0之前版本,應用程序的入口爲SparkContext,SqlContext和HiveContext,     在Spark2.0之後統一使用SparkSession !
相關文章
相關標籤/搜索