Spark on YARN-Cluster和YARN-Client的區別

YARN-Cluster和YARN-Client的區別 (1)SparkContext初始化不同,這也導致了Driver所在位置的不同,YarnCluster的Driver是在集羣的某一臺NM上,但是Yarn-Client就是在driver所在的機器上;  (2)而Driver會和Executors進行通信,這也導致了Yarn_cluster在提交App之後可以關閉Client,而Yarn-Cli
相關文章
相關標籤/搜索