Spark Client和Cluster兩種運行模式的工作流程、基本概念

Spark Client和Cluster兩種運行模式的工作流程 在Client模式下,Driver進程會在當前客戶端啓動,客戶端進程一直存在直到應用程序運行結束 工作流程如下: 1.啓動master和worker . worker負責整個集羣的資源管理,worker負責監控自己的cpu,內存信息並定時向master彙報 2.在client中啓動Driver進程,並向master註冊 3.maste
相關文章
相關標籤/搜索