【Spark亞太研究院系列叢書】Spark實戰高手之路-第一章 構建Spark集羣(第五步)(5)

從控制檯咱們能夠看見有兩個DataNode,此時咱們點擊「Live Nodes」查看一下其信息:node

從控制檯中看到了咱們的兩個Datanode節點SparkWorker1和SparkWorker2,這正是咱們預期中的!web

第三步:啓動yarn集羣spa

使用jps命令能夠發現SparkMaster機器上啓動了ResourceManager進程:orm

而在SparkWorker1和SparkWorker2上則分別啓動了NodeManager進程:進程

在SparkMaster上訪問http://SparkMaster:8088 能夠經過Web控制檯查看ResourceManager運行狀態:get

在SparkMaster上訪問http://SparkWorker1:8042  能夠經過Web控制檯查看SparkWorker1上的NodeManager運行狀態:it

在SparkMaster上訪問http://SparkWorker2:8042  能夠經過Web控制檯查看SparkWorker2上的NodeManager運行狀態:spark

接下來使用「mr-jobhistory-daemon.sh」來啓動JobHistory Server:ast

啓動後能夠經過http://SparkMaster:19888 在Web控制檯上看到JobHistory中的任務執行歷史信息:import

相關文章
相關標籤/搜索