大數據基礎系列之spark的監控體系介紹

          目前有好幾種監控spark應用程序的工具:web UIs,指標系統和外部監控儀。 一,web界面 1,界面的基本介紹 每一個Spark應用程序都會啓動一個spark ui,默認端口是4040端口,用於展示對應用程序有用的信息。包括以下信息: 1),stages和tasks列表。 2),RDD大小的總概和內存使用。 3),運行環境信息。 4),運行的Executors狀態。 你可
相關文章
相關標籤/搜索