如何編寫YARN應用程序

1. 概述 YARN是一個資源管理系統,負責集羣資源的管理和分配。如果想要將一個新的應用程序運行在YARN之上,通常需要編寫兩個組件:客戶端和ApplicationMaster。由於這兩個組件編寫非常複雜,尤其ApplicationMaster,需要考慮RPC調用、任務容錯等細節,所以,往往由專業的開發人員編寫這兩個組件,並提供給上層的應用程序用戶使用。如果大量應用程序可抽象成一種通用框架,那麼只
相關文章
相關標籤/搜索