Spark運行架構特點

1.1.1.Executor進程專屬 每個Application獲取專屬的executor進程,該進程在Application期間一直駐留,並以多線程方式運行tasks。 Spark Application不能跨應用程序共享數據,除非將數據寫入到外部存儲系統。 如圖所示:     1.1.2. 支持多種資源管理器 Spark與資源管理器無關,只要能夠獲取executor進程,並能保持相互通信就可以
相關文章
相關標籤/搜索