理解Spark運行模式(二)

上一篇說到Spark的yarn client運行模式,它與yarn cluster模式的主要區別就是前者Driver是運行在客戶端,後者Driver是運行在yarn集羣中。yarn client模式一般用在交互式場景中,比如spark shell, spark sql等程序,但是該模式下運行在客戶端的Driver與Yarn集羣有大量的網絡交互,如果客戶端與集羣之間的網絡不是很好,可能會導致性能問題
相關文章
相關標籤/搜索