hadoop的集羣配置,原創解決了好多個問題(spark+hadoop+scala集羣配置)

centos下,安裝spark+hadoop+scala,centos


說下我遇到的問題和注意事項ide


一、hadoop的文件夾及用戶問題oop


假定是3臺部署,1臺master,2臺slave,在master,slave1,slave2上均創建hadoop用戶,spa


而後用命令修改全部者scala


sudo chown -hR hadoop /srv/hadoopip


二、低級錯誤,端口號,主要是全角的冒號::致使的hadoop


hdfs://master:9000和hdfs://master:9000部署


由於複製的電子書的配置文件it


三、端口號,no route to hostspark


這是個組名的問題難題,雖然官方有說明,但一點解決不了問題


仍是要本身解決


一個是關閉防火牆,另一個是查看端口telnet ip 端口號,以及

相關文章
相關標籤/搜索