hadoop 之分佈式安裝

一、防火牆;html

    1) 重啓後生效 
    開啓: chkconfig iptables on 
    關閉: chkconfig iptables off 

    2) 即時生效,重啓後失效 
    開啓: service iptables start 
    關閉: service iptables stop node

    3)查看防火牆狀態:service iptables statusshell

 二、HDFS 啓動vim

       sbin/hadoop-daemon.sh start/stop namenodecentos

        sbin/hadoop-daemon.sh start/stop secondarynamenodessh

        sbin/hadoop-daemon.sh start/stop datanodeoop

       須要在sbin目錄下操做spa


yarn jar /opt/cloud/hadoop-2.6.0-cdh5.4.2/ws/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0-cdh5.4.2.jar  wordcount /wordcount  /output.net

sbin/yarn-daemon.sh start resourcemanagerorm

sbin/yarn-daemon.sh start nodemanager


       ./yarn-daemon.sh stop nodemanager

       ./yarn-daeon.sh stop resourcemanager

       如何克隆虛擬機:http://www.centoscn.com/CentOS/2015/0208/4656.html

       CentOS Linux 克隆完後,鏈接問題   http://my.oschina.net/u/2356966/blog/469248

必定要保證,集羣中的全部節點的配置都是同樣的,

所以,我是在同一個節點上配置,而後同步到其餘的機器上。

             臨時修改用戶名:hostname  新名

             永久性修改:vim /etc/sysconfig/network

ssh這是個命令,能夠放到shell腳本,那麼這樣就可以實現自動化的鏈接到其餘的機器,同時,執行相應的命令。          

設置步驟

        生成本身的公私鑰對:ssh-keygen -t rsa

        將本身的公鑰複製到對方的機器下,並受權;ssh-copy-id root@master

        別忘了給本身也設置下

        使用ssh直接登陸,不須要添寫密碼

ssh-keygen -t rsa  生成一次

ssh-copy-id root@master   屢次受權給不一樣的機器

 

同步;

scp -r hadoop-2.6.0-cdh5.4.2/  root@slave01:/opt/cloud/

scp -r jdk1.7.0_45/  root@slave01:/opt/cloud/

scp -r /etc/profile root@slave01:/etc/profile



master節點格式化:hdfs namenode -format


datanode節點啓動,須要刪除dfs中的dn文件

相關文章
相關標籤/搜索