虛擬機一步到位
前提環境:vim
你得先在 Windows 上安裝好 VMware
沒有點此下載
連接:https://pan.baidu.com/s/1H2SAP1On7AvK-c3bCZ3BwA
提取碼:whj6
centos
提示:瀏覽器
一、我安裝的虛擬機是 CentOS 6.5
點此下載
https://pan.baidu.com/s/1jilrYa6nM10Yt9PEkTtHxA
提取碼:whj6
bash
二、我這篇博客是講 Hadoop 徹底分佈式安裝、連網及搭建一步到位,若是你想單機就能夠也能夠,後面步驟中省略一些內容,最後就是單機的啦!網絡
正式操做:ssh
1、把剛剛從我百度網盤下載的文件放在你剩餘空間大的磁盤內,雖然個人文件只有六個多G,但後期各類操做可能須要60個G,因此你最把它放在大磁盤內。分佈式
二、打開以前安裝好的 VMware (怎麼安裝這裏不作講解,參考其餘博主便可)oop
三、導入虛擬機( 約需5到10分鐘 )
若是報錯,繼續便可,不用理他
四、虛擬機名稱和存放地址
測試
我這裏以 slave3 爲例,你新導入的話應該是 master ,名字其實隨便均可以,通常英文就好,若是你是配置集羣的話仍是master,以避免後面沒必要要的煩惱 (能夠提早建立好相應的文件夾)spa
五、點擊左上角的 slave3 (你的master)
再點旁邊的開啓此虛擬機
進去後選着登陸窗口的其餘 ( 不要登陸 whj )
選擇其餘後輸入 root (以超級管理員的身份登陸)
密碼是:653335
whj 用戶也是這個密碼,等後面操做搞完你能夠刪除這個用戶新建一個或者改個密碼(不急哦,這篇文章內容弄完再回來搞)
這個參考個人另外一篇博客
點擊這裏參考
https://blog.csdn.net/whjhut/article/details/109193887
六、修改文件 1 (共有四個文件須要修改)
一、輸入命令
vim /etc/sysconfig/network-scripts/ifcfg-eth0
在這個終端旁邊再開一個,用於查詢相關東西
(我管這個旁邊的終端叫右邊,前面那個終端我叫左邊)
右邊終端輸入命令
ifconfig
左邊終端進入後輸入字母 i(編輯命令)
一、改 HWADDR
二、把 UUID 那一行前面加個 # 號 (註釋功能)
(master不用,其餘從節點要)
三、修改 IP , IP 在右邊那個終端框框下面的第一行的第一個 IP ,192.168.43.130(這是個人),你用你的,左邊的那些 43 改爲你對應數字
改完按 Esc 再按 Shift+: 在輸入 wq!
這個是 寫入保存強制退出 的操做
後面的文件編輯也是經過這個方式退出編輯的
二、修改文件 2
輸入命令
vim /etc/sysconfig/network
一、進去以後把 43 改爲你的
二、master 就不用改了,後面若是還要增長就修改成相應的主機名,如 slave1
三、修改文件 3
輸入命令(若是不能直接進入看提示進入編輯便可)
vim /etc/hosts
若是你是搞集羣分佈,能夠不刪後兩行,增長几個從節點,master後就有幾行
四、修改文件 4 (master在這裏不用此步驟,加從節點就要了,單機配置也是不用的)
進入相關目錄
cd /usr/local/hadoop-2.6.4/etc/hadoop/
再輸入命令
vim slaves
刪除localhost,添加: slave1 slave2 slave3 (相應從節點的名字,有幾個加幾個,沒有就別加上去了,在這裏)
七、刪除文件
輸入命令
rm -rf /etc/udev/rules.d/70-persistent-net.rules
這步應該是不用的,我這裏已經刪過了,不過爲了別出幺蛾子,仍是刪了吧
八、重啓網絡
輸入命令
service network restart
測試網絡是否能夠,輸入命令
ping www.baidu.com
發現 ping 不了
輸入命令重啓虛擬機
reboot
當你再次進入就能夠 ping 成功啦
單機配置到此結束,下面接着講徹底分佈式集羣的搭建
這裏繼續重複正式操做的 3 到 8 步
記住,每一個主機名和 IP 地址是不同的
好比個人
192.168.43.130
到了這一步192.168.43都不用變,變的是最後一個
個人 master 是 130
個人 slave1 是 131
個人 slave2 是 132
增長相應的行,不是修改以前的,以前的不變哦
最後你所有弄完了,能夠嘗試互相 ping
如在 主節點 master 上輸入命令
ping slave1
也能夠進行 ssh 鏈接
輸入命令
ssh slave1
ssh鏈接以後輸入命令退出
exit
啓動集羣
進入目錄
cd /usr/local/hadoop-2.6.4/sbin
啓動命令
./start-dfs.sh ./start-yarn.sh ./mr-jobhistory-daemon.sh start historyserver
使用 jps 命令,查看進程
jps
在Windows 下
C:\Windows\System32\drivers\etc\hosts
添加IP 映射
你有幾個加幾個,增長在那個文件後面就能夠了
(你的 IP 地址 主機名)
192.168.43.130 master master.centos.com 192.168.43.131 slave1 slave1.centos.com 192.168.43.132 slave2 slave2.centos.com 192.168.43.133 slave3 slave3.centos.com
瀏覽器查看集羣相應信息
(虛擬機開機了才能夠看獲得)
http://master:50070
至此,大功告成!!!
若是哪一步有問題,就看看前一步是否是有問題
若是對你有幫助,麻煩大佬給我點個贊鴨,謝謝!