hadoop部署徹底分佈式簡要步驟

一、配置hosts文件爲創建無密鑰通訊作準備

master,slave1,slave2都要作相同的配置

二、配置SSH無密鑰通訊雙方互相通訊

注意關閉防火牆和配置hosts network 要設置DNS和網關

通訊原理讓雙方持有對方的公鑰，放在authorized_keys中。

三、配置jdk

四、導入並配置hadoop

將jdk配置在hadoop_env.sh中

配置hadoop的core-site.xml

配置mapred-site.xml

配置hdfs-site.xml

配置masters,slaves最好都用地址寫

五、格式化hadoop只須要格式化一次就行，若是想格式化第二次須要刪除tmp文件夾的全部東西

六、啓動

七、配置在eclipse中，製做插件，放在plugin下，若是有權限問題 設置權限爲false

八、記得將hdfs-site.xml中的權限驗證改成false.