Spark架構

Spark官網展示瞭如下的集羣運行架構 其中涉及到以下概念: 概念 解釋 Application 基於Spark的用戶程序,包含了1個Driver Program和若干個Executor進程 Driver Program 運行Application的main()函數並且創建SparkContext,通常用SparkContext代表Driver Program;監聽特定端口以保證和executor
相關文章
相關標籤/搜索