Spark應用運行流程

相關基本術語 Application:應用,即用戶需要完成的應用程序。一般來說,這部分代碼需要用戶根據自己的需求來完成。這部分代碼主要包括兩部分:Driver和Executor。 Driver:顧名思義,驅動者,爲Application準備運行環境,驅動並監控Application的運行。 Worker:當SparkContext申請到資源後,就會確定此應用程序在Cluster的哪些節點運行。運行
相關文章
相關標籤/搜索