Spark Web UI 監控

平常鋪墊 本人最終用於大數據集測試的集羣中包含4個節點,每一個節點是一個worker,每一個worker上啓動一個Executor,其中Driver也跑在master上。每一個Executor可以使用的核數爲2,可用的內存爲2g,集羣中全部Executor最大可用核數爲8。 conf/spark-defaults.conf 部分參數配置以下:node spark.master
相關文章
相關標籤/搜索