hadoop 之分佈式安裝

一、防火牆;

    1) 重啓後生效 
    開啓： chkconfig iptables on 
    關閉： chkconfig iptables off 

    2) 即時生效，重啓後失效 
    開啓： service iptables start 
    關閉： service iptables stop 

    3)查看防火牆狀態：service iptables status

 二、HDFS 啓動

       sbin/hadoop-daemon.sh start/stop namenode

        sbin/hadoop-daemon.sh start/stop secondarynamenode

        sbin/hadoop-daemon.sh start/stop datanode

       須要在sbin目錄下操做

yarn jar /opt/cloud/hadoop-2.6.0-cdh5.4.2/ws/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0-cdh5.4.2.jar  wordcount /wordcount  /output

sbin/yarn-daemon.sh start resourcemanager

sbin/yarn-daemon.sh start nodemanager

       ./yarn-daemon.sh stop nodemanager

       ./yarn-daeon.sh stop resourcemanager

       如何克隆虛擬機：http://www.centoscn.com/CentOS/2015/0208/4656.html

       CentOS Linux 克隆完後，鏈接問題   http://my.oschina.net/u/2356966/blog/469248

必定要保證，集羣中的全部節點的配置都是同樣的，

所以，我是在同一個節點上配置，而後同步到其餘的機器上。

             臨時修改用戶名：hostname  新名

             永久性修改：vim /etc/sysconfig/network

ssh這是個命令，能夠放到shell腳本，那麼這樣就可以實現自動化的鏈接到其餘的機器，同時，執行相應的命令。          

設置步驟

        生成本身的公私鑰對：ssh-keygen -t rsa

        將本身的公鑰複製到對方的機器下，並受權;ssh-copy-id root@master

        別忘了給本身也設置下

        使用ssh直接登陸，不須要添寫密碼

ssh-keygen -t rsa  生成一次

ssh-copy-id root@master   屢次受權給不一樣的機器

 

同步;

scp -r hadoop-2.6.0-cdh5.4.2/  root@slave01:/opt/cloud/

scp -r jdk1.7.0_45/  root@slave01:/opt/cloud/

scp -r /etc/profile root@slave01:/etc/profile

master節點格式化：hdfs namenode -format

datanode節點啓動，須要刪除dfs中的dn文件