Ubuntu安裝hadoop並作單機測試

1.配置jdk

見前文apache

2. 下載解壓hadoop

這裏以2.7.7版本爲例,將文件剪切到/usr/local裏面並更更名字爲hadoop方便後續配置bash


3. 爲hadoop配置jdk版本呢

設置hadoop目錄下的env文件,hadoop/etc/hadoop-env.sh文件,注意這裏的etc是在hadoop目錄下的etc,你們注意命令執行的路徑,在裏面定義jdk目錄,建議將hadoop_homepath也定義一下oop



4. 爲hadoop設置環境變量

這裏直接設置~/.bashrc,設置相關配置便可,HADOOP_HOME是個人hadoop文件路徑,你們根據我的狀況更改便可,最後的PATH由於我在bashrc裏面同時配置了jdkhadoophbase,因此若是有和我狀況相同的小夥伴建議將PATH下在一塊兒,像註釋那樣測試



5. 設置ip映射

配置hosts文件,爲主機增長IP映射3d



6. 增長用戶並受權

通常咱們測試的時候都會使用hadoop或者hduser一類的用戶,當測試的時候切換到對應用戶並進行操做,也可使用其餘用戶(主機用戶),可是記得對用戶進行受權,不然當後面操做的時候會由於不能訪問文件而致使錯誤。code



7. 單機測試

進入hadoop目錄,創建input文件夾,複製幾個文件看成輸入數據源(這裏採用的是hadoop/etc/*.xml),而後執行haddop自帶的關鍵字提取方法進行檢驗,將結果輸出到output文件當中,__注意:__二次實驗時須要事先刪除output文件cdn



8. 結果

執行完畢後目錄下會出現output文件夾,查看裏面的文件的內容便可xml



相關文章
相關標籤/搜索