Hbase安裝與簡介

（一）簡介：

HBase是一個分佈式的、面向列的開源數據庫。HBase是Google Bigtable的開源實現，它利用Hadoop HDFS做爲其文件存儲系統，利用Hadoop MapReduce來處理HBase中的海量數據，利用Zookeeper做爲協同服務。 

 

表結構：

HBase以表的形式存儲數據。表有行和列組成。列劃分爲若干個列族/列簇(column family)。 

Row Key	column-family1		column-family2			column-family3
	column1	column2	column1	column2	column3	column1
key1
key2
key3

 

 

如上圖所示，key一、key二、key3是三條記錄的惟一的row key值，column-family一、column-family二、column-family3是三個列族，每一個列族下又包括幾列，好比column-family1這個列族下包括兩列，名字是column1和column2。t1:ab ,t2:dx是由row key1和column-family1—column1惟一肯定的一個單元cell。這個cell中有兩個數據，ab和dx。兩個值的時間戳不同，分別是t1,t2，hbase會返回最新時間的值給請求者。

 

名詞定義：

1）Row Key
與nosql數據庫們同樣,row key是用來檢索記錄的主鍵。訪問hbase table中的行，只有三種方式：

 

• 單個row key訪問
• 經過row key的range
• 全表掃描

Row key能夠是任意字符串(最大長度是 64KB，實際應用中長度通常爲 10-100bytes)，在hbase內部，row key保存爲字節數組。
存儲時，數據按照Row key的字典序(byte order)排序存儲。設計key時，將常常一塊兒讀取的行存儲放到一塊兒。(位置相關性)

2）列族 column family
hbase表中的每一個列，都歸屬與某個列族。列族是表的schema的一部分(而列不是)，必須在使用表以前定義。列名都以列族做爲前綴。例如courses:history ， courses:math 都屬於 courses 這個列族。
3）單元 Cell
HBase中經過row和columns肯定的爲一個存貯單元稱爲cell。由{row key, column( =<family> + <label>), version} 惟一肯定的單元。cell中的數據是沒有類型的，所有是字節碼形式存儲。

4）時間戳 timestamp
每一個cell都保存着同一份數據的多個版本。版本經過時間戳來索引。時間戳的類型是 64位整型。時間戳能夠由hbase(在數據寫入時自動 )賦值，此時時間戳是精確到毫秒的當前系統時間。時間戳也能夠由客戶顯式賦值。若是應用程序要避免數據版本衝突，就必須本身生成具備惟一性的時間戳。每一個cell中，不一樣版本的數據按照時間倒序排序，即最新的數據排在最前面。
爲了不數據存在過多版本形成的的管理 (包括存貯和索引)負擔，hbase提供了兩種數據版本回收方式。一是保存數據的最後n個版本，二是保存最近一段時間內的版本（好比最近七天）。用戶能夠針對每一個列族進行設置。

（二）安裝：

1. 下載安裝包：http://www.apache.org/dyn/closer.cgi/hbase/，下載後綴爲 .tar.gz 結尾的文件。本文測試的版本是 hbase-0.94.10.tar.gz

2. 解壓

tar zxvf  hbase-0.94.10.tar.gz

3. 修改數據存儲目錄，編輯 conf/hbase-site.xml 配置hbase.rootdir

<?xml version="1.0"?>  
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>  
<configuration>  
  <property>  
    <name>hbase.rootdir</name>  
    <value>存儲目錄</value>  
  </property>  
</configuration>  

4. 啓動Hbase

./bin/start-hbase.sh

starting master, logging to /home/onlyone/software/hbase-0.94.10/bin/../logs/hbase-onlyone-master-ubuntu.out

全部的服務都運行在一個JVM上，包括Hbase和Zookeeper。Hbase的日誌放在logs目錄，當你啓動出問題的時候，能夠檢查這個日誌。
5. 用shell鏈接Hbase

./bin/hbase shell

（三）操做演示

有一學生成績表

name	grade	course
		math	art
Tom	6	99	100
Yangli	15

這裏grade對於表來講是一個只有它本身的列族，course對於表來講是一個有兩個列的列族，這個列族由兩個列組成math和art，固然咱們能夠根據須要在course中創建更多的列，如computer、physics等列添加入course列族。

1）創建一個表scores，有兩個列族grade和course

hbase(main):001:0> create 'scores' ,'grade','course'

list命令來查看當前HBase裏有哪些表

hbase(main):002:0> list
TABLE                                                                                                                
scores                                                                                                               
test                                                                                                                 
2 row(s) in 0.1320 seconds

describe命令來查看錶結構

hbase(main):001:0> describe 'scores'
DESCRIPTION                                                                 ENABLED                                  
 'scores', {NAME => 'course', DATA_BLOCK_ENCODING => 'NONE', BLOOMFILTER => true                                     
  'NONE', REPLICATION_SCOPE => '0', VERSIONS => '3', COMPRESSION => 'NONE',                                          
  MIN_VERSIONS => '0', TTL => '2147483647', KEEP_DELETED_CELLS => 'false',                                           
 BLOCKSIZE => '65536', IN_MEMORY => 'false', ENCODE_ON_DISK => 'true', BLOC                                          
 KCACHE => 'true'}, {NAME => 'grade', DATA_BLOCK_ENCODING => 'NONE', BLOOMF                                          
 ILTER => 'NONE', REPLICATION_SCOPE => '0', VERSIONS => '3', COMPRESSION =>                                          
  'NONE', MIN_VERSIONS => '0', TTL => '2147483647', KEEP_DELETED_CELLS => '                                          
 false', BLOCKSIZE => '65536', IN_MEMORY => 'false', ENCODE_ON_DISK => 'tru                                          
 e', BLOCKCACHE => 'true'}                                                                                           
1 row(s) in 0.7240 seconds

ps：記得全部的表名、列名都須要加上引號

2）插入值

hbase(main):007:0> put 'scores','Tom','grade','6'
0 row(s) in 0.0790 seconds

hbase(main):008:0> put 'scores','Tom','course:math','99'
0 row(s) in 0.0060 seconds

hbase(main):009:0> put 'scores','Tom','course:art','100'
0 row(s) in 0.0100 seconds

／／掃描表數據
hbase(main):010:0> scan 'scores'
ROW                            COLUMN+CELL                                                                           
 Tom                           column=course:art, timestamp=1376493359159, value=100                                 
 Tom                           column=course:math, timestamp=1376493340514, value=99                                 
 Tom                           column=grade:, timestamp=1376493316800, value=6                                       
1 row(s) in 0.0530 seconds

put命令比較簡單：
hbase> put ‘t1′, ‘r1′, ‘c1′, ‘value'

t1指表名，r1指行鍵名，c1指列名，value指單元格值

3）根據鍵值查詢數據

hbase(main):012:0> get 'scores' ,'Tom'
COLUMN                         CELL                                                                                  
 course:art                    timestamp=1376493359159, value=100                                                    
 course:math                   timestamp=1376493340514, value=99                                                     
 grade:                        timestamp=1376493316800, value=6                                                      
3 row(s) in 0.0170 seconds

hbase(main):013:0> get 'scores' ,'Tom','grade'
COLUMN                         CELL                                                                                  
 grade:                        timestamp=1376493316800, value=6                                                      
1 row(s) in 0.0080 seconds

hbase(main):014:0> get 'scores' ,'Tom','course:math'
COLUMN                         CELL                                                                                  
 course:math                   timestamp=1376493340514, value=99                                                     
1 row(s) in 0.0250 seconds

4）刪除指定數據

hbase(main):016:0> delete 'scores' ,'Tom','grade'
0 row(s) in 0.1350 seconds

hbase(main):017:0> scan 'scores'
ROW                            COLUMN+CELL                                                                           
 Tom                           column=course:art, timestamp=1376493359159, value=100                                 
 Tom                           column=course:math, timestamp=1376493340514, value=99                                 
1 row(s) in 0.1380 seconds

5）統計行數：

hbase(main):018:0> count 'scores'
1 row(s) in 0.8500 seconds

6）hbase shell腳本
既然是shell命令，固然也能夠把全部的hbase shell命令寫入到一個文件內，象linux shell腳本那樣順序執行全部命令。如：

shell test.hbaseshell 

參考資料： http://www.jb51.net/article/31172.htm