昨天弄了一天的snappy壓縮。一直報錯。在官網找資料。結果發現一個原生就支持的壓縮格式lz4。看網上對應教程,比snappy速度還快。對比結果參考:http://www.tielaba.com/shujuku/20130806/13.html html
個人操做環境centos6.6(64) + hadoop2.5.2 + hbase1.0.1.1()linux
hadoop2.5.2 的編譯安裝,參考http://www.linuxidc.com/Linux/2015-03/115272.htmshell
hbase的編譯安裝,參考官方教程http://hbase.apache.org/book.html#_build_a_tarball : apache
mvn -DskipTests clean install && mvn -DskipTests package assembly:single
hbase啓用lz4很簡單。參考官方的教程:http://hbase.apache.org/book.html#compressor.install
centos
cd $HBASE_HOME mkdir lib/native ln -s $HADOOP_HOME/lib/native lib/native/Linux-amd64-64