CentOS7 Hadoop 3.1.0 編譯安裝

1.配置環境變量

JAVA_HOME=/jdk1.8.0_131
ANT_HOME=/apache-ant-1.10.5
MAVEN_HOME=/apache-maven-3.5.4
FINDBUGS_HOME=/findbugs-3.0.1
PATH=$JAVA_HOME/bin:$ANT_HOME/bin:$FINDBUGS_HOME/bin:$MAVEN_HOME/bin:$PATH
CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar

export JAVA_HOME ANT_HOME MAVEN_HOME FINDBUGS_HOME PATH CLASSPATH

2.安裝必須依賴

yum -y install lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel patch gcc gcc-c++
yum -y install protobuf.x86_64 protobuf-devel.x86_64

3.對於2步驟安裝的cmake可能版本太低，若是編譯Hadoop源碼時，出現cmake錯誤，能夠手動編譯安裝cmake

yum remove cmake
tar -zxvf cmake-3.12.0.tar.gz 
cd cmake-3.12.0
 ./configure && make && make install

4.解壓hadoop源碼，增長dynamodb-local-oregon repository

vi hadoop-3.1.0-src/pom.xml

<repositories>

    <repository>

        <id>dynamodb-local-oregon</id>

        <name>DynamoDB Local Release Repository</name>

        <url>https://s3-us-west-2.amazonaws.com/dynamodb-local/release</url>

    </repository>

    ...

  </repositories>

參照amazon網站數據：
https://docs.aws.amazon.com/amazondynamodb/latest/developerguide/DynamoDBLocal.html#DynamoDBLocal.DownloadingAndRunning

5.運行maven命令

pwd

hadoop-3.1.0-src/

mvn package -Pdist,native,docs -DskipTests -Dtar 

 注意：

　　1.若是findbugs,cmake很差下載安裝，或者編譯時遇到什麼問題，能夠添加博客左上角的羣，在羣中下載或詳詢遇到的問題。

       2.在用MAVEN進行編譯時候，建議用maven的中央倉庫做爲構建下載倉庫。