小白學習大數據之路——Hadoop3.0.0-alpha2 安裝以及測試程序wordcount實踐

很久沒看大數據,最近發現用的軟件都太舊了,因此準備更行全部大數據相關的新用法。apache

tar -zxvf hadoop-3.0.0-alpha2.tar.gz
mv hadoop-3.0.0-alpha2 /usr/local/hadoop
  • 第三步:配置參數 這裏由於是新版本,因此文件路徑有變化,我但是費好大力氣找到的。至關於舊版本的conf文件
vi etc/hadoop/gadoop-env.sh   //進入文件後修改
export JAVA_HOME=*****       //你安裝的Java路徑
source hadoop-env.sh             //使修改文件生效
  • 第四步:那就是jwordcount程序了
hadoop -version   //看看是否安裝成功
mkdir input           //在Hadoop文件夾下新建文件夾input
cp etc/hadoop/* input    
ls     input
  • 最後一步:計數,看圖吧
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.0.0-alpha1.jar grep input output 'dfs[a-z.]+'

輸入圖片說明 輸入圖片說明

相關文章
相關標籤/搜索