測試spark集羣是否安裝成功:網頁監控頁面和運行spark shell

1、查看集羣的網頁監控狀態web

1.查看spark集羣的狀態,就是master的訪問地址shell

默認訪問地址:http://master的ip:8080 oop

2.查看spark集羣執行的jobsspa

默認訪問地址:http://master的ip:4040code

2、查看spark history server服務orm

默認訪問地址:http://history server的ip:18080,默認history server的地址和master的地址相同。server

2、運行spark shellip

執行命令:bin/spark-shell --master spark://hadoop2:7077,hadoop3:7077 --deploy-model clienthadoop

在spark shell中執行一些Rdd操做。ci

相關文章
相關標籤/搜索