spark on yarn

spark on yarn 主要是藉助於yarn良好的資源管理機制。將Spark Application部署到yarn種,有如下優點: (1)部署Application和服務更加方便   只需要yarn服務,包括Spark,Storm在內的多種應用程序不要要自帶服務,它們經由客戶端提交後,由yarn提供的分佈式緩存機制分發到各個計算節點上 (2)資源隔離機制   yarn只負責資源的管理和調度,完
相關文章
相關標籤/搜索