初學Hadoop之單機模式環境搭建

  本文僅做爲學習筆記,供你們初學Hadoop時學習參考。初學Hadoop,歡迎有經驗的朋友進行指導與交流!java

一、安裝CentOS7

準備linux

  CentOS系統鏡像CentOS-7.0-1406-x86_64-Everything.isovim

  vmware workstation 11ssh

安裝分佈式

  一、點擊建立一個新的虛擬機,選擇"典型"配置,下一步。oop

  

  二、選擇"安裝程序光盤鏡像文件",選擇已經準備的系統鏡像文件,下一步。學習

  

  三、設置帳戶信息,下一步。測試

  

  四、設置虛擬機名稱和保存路徑,下一步。spa

  

  五、默認配置,下一步。3d

  

  六、默認配置,點擊完成。

  

  七、等待安裝完成。

  

  

  八、輸入密碼登陸系統。

  

  至此,系統安裝完成。

二、安裝JDK1.7.0

準備

  jdk安裝包jdk-7u15-linux-x64.tar.gz

安裝

  一、查看當前jdk版本。

  

  二、解壓準備的JDK文件,解壓路徑/opt。

  

  三、修改配置系統變量。

vim /etc/profile
  export JAVA_HOME=/opt/jdk1.7.0_15
  export CLASSPATH=.:$JAVA_HOME/jre/lib:$JAVA_HOME/lib
  export PATH=$PATH:$JAVA_HOME/bin:$JAVA_HOME/jre/bin

  保存退出,運行。

source /etc/profile

  

  三、運行命令。

update-alternatives --install /usr/bin/java java /opt/jdk1.7.0_15/bin/java 60
update-alternatives --config java

  輸入新配置的jdk序號。

  

  至此,JDK安裝完成。

三、安裝Hadoop2.6.0

準備

  hadoop-2.6.0-x64.tar.gz

安裝

  一、解壓Hadoop,解壓路徑/opt。

  

  二、配置hadoop-env.sh

  文件路徑 hadoop-2.6.0\etc\hadoop

  

  三、配置系統變量。

#vim /etc/profile
#source /etc/profile

  

  至此,Hadoop單機模式配置完成。(單機模式,僞分佈式,真正分佈式)

四、SSH無密碼登陸

$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
驗證ssh,# ssh localhost 
不須要輸入密碼便可登陸。

  

  至此,ssh無密碼登陸配置完成。

=====下一篇文章將使用WordCount分詞統計進行環境測試(已經過)。=====

相關文章
相關標籤/搜索