大數據軟件安裝之HBase（NoSQL數據庫）

1、安裝部署

一、Zookeeper正常部署

（見前篇博文大數據軟件安裝之ZooKeeper監控 ）

[test@hadoop102 zookeeper-3.4.10]$ bin/zkServer.sh start

[test@hadoop103 zookeeper-3.4.10]$ bin/zkServer.sh start

[test@hadoop104 zookeeper-3.4.10]$ bin/zkServer.sh start

二、Hadoop正常部署

（見前篇博文大數據軟件安裝之Hadoop（Apache）（數據存儲及計算 ））

[test@hadoop102 hadoop-2.7.2]$ sbin/start-dfs.sh

[test@hadoop103 hadoop-2.7.2]$ sbin/start-yarn.sh

三、HBase的解壓

解壓Hbase到指定目錄：

[test@hadoop102 software]$ tar -zxvf hbase-1.3.1-bin.tar.gz -C /opt/module

四、HBase的配置文件

修改HBase對應的配置文件。

1）hbase-env.sh修改內容：

export JAVA_HOME=/opt/module/jdk1.8.0_144

export HBASE_MANAGES_ZK=false

2）hbase-site.xml修改內容：

<configuration>

   <property>

      <name>hbase.rootdir</name>

      <value>hdfs://hadoop102:9000/HBase</value>

   </property>

 

   <property>

      <name>hbase.cluster.distributed</name>

      <value>true</value>

   </property>

 

   <!-- 0.98後的新變更，以前版本沒有.port,默認端口爲60000 -->

   <property>

      <name>hbase.master.port</name>

      <value>16000</value>

   </property>

 

   <property>  

      <name>hbase.zookeeper.quorum</name>

       <value>hadoop102,hadoop103,hadoop104</value>

   </property>

 

   <property>  

      <name>hbase.zookeeper.property.dataDir</name>

       <value>/opt/module/zookeeper-3.4.10/zkData</value>

   </property>

</configuration>

3）regionservers：

hadoop102

hadoop103

hadoop104

4）軟鏈接hadoop配置文件到HBase：

[test@hadoop102 module]$ ln -s /opt/module/hadoop-2.7.2/etc/hadoop/core-site.xml /opt/module/hbase/conf/core-site.xml

[test@hadoop102 module]$ ln -s /opt/module/hadoop-2.7.2/etc/hadoop/hdfs-site.xml /opt/module/hbase/conf/hdfs-site.xml

五、HBase遠程發送到其餘集羣

[test@hadoop102 module]$ xsync hbase/

6 、HBase服務的啓動

1）．啓動方式

 [test@hadoop102 hbase]$ bin/hbase-daemon.sh start master

[test@hadoop102 hbase]$ bin/hbase-daemon.sh start regionserver

提示：若是集羣之間的節點時間不一樣步，會致使regionserver沒法啓動，拋出ClockOutOfSyncException異常。

修復提示：

a、同步時間服務

時間同步的方式：找一個機器，做爲時間服務器，全部的機器與這臺集羣時間進行定時的同步，好比，每隔十分鐘，同步一次時間。

配置時間同步具體實操：

1>.    時間服務器配置（必須root用戶）

（1）檢查ntp是否安裝

[root@hadoop102 桌面]# rpm -qa|grep ntp

ntp-4.2.6p5-10.el6.centos.x86_64

fontpackages-filesystem-1.41-1.1.el6.noarch

ntpdate-4.2.6p5-10.el6.centos.x86_64

（2）修改ntp配置文件

[root@hadoop102 桌面]# vi /etc/ntp.conf

修改內容以下

a）修改1（受權192.168.1.0-192.168.1.255網段上的全部機器能夠從這臺機器上查詢和同步時間）

#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap爲

restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap

              b）修改2（集羣在局域網中，不使用其餘互聯網上的時間）

server 0.centos.pool.ntp.org iburst

server 1.centos.pool.ntp.org iburst

server 2.centos.pool.ntp.org iburst

server 3.centos.pool.ntp.org iburst爲

#server 0.centos.pool.ntp.org iburst

#server 1.centos.pool.ntp.org iburst

#server 2.centos.pool.ntp.org iburst

#server 3.centos.pool.ntp.org iburst

c）添加3（當該節點丟失網絡鏈接，依然能夠採用本地時間做爲時間服務器爲集羣中的其餘節點提供時間同步）

server 127.127.1.0

fudge 127.127.1.0 stratum 10

（3）修改/etc/sysconfig/ntpd 文件

[root@hadoop102 桌面]# vim /etc/sysconfig/ntpd

增長內容以下（讓硬件時間與系統時間一塊兒同步）

SYNC_HWCLOCK=yes

         Tips:

         系統時間: 通常說來就是咱們執行 date命令看到的時間，linux系統下全部的時間調用（除了直接訪問硬件時間的命令）都是使用的這個時間。

        硬件時間: 主板上BIOS中的時間，由主板電池供電來維持運行，系統開機時要讀取這時間，並根據它來設定系統時間（注意：系統啓動時根據硬件時間設定系統時間的過程可能存在時區換算，這要視具體的系統及相關設置而定）

（4）從新啓動ntpd服務

[root@hadoop102 桌面]# service ntpd status

ntpd 已停

[root@hadoop102 桌面]# service ntpd start

正在啓動 ntpd：                                            [肯定]

（5）設置ntpd服務開機啓動

[root@hadoop102 桌面]# chkconfig ntpd on

2>.    其餘機器配置（必須root用戶）

（1）在其餘機器配置10分鐘與時間服務器同步一次

[root@hadoop103桌面]# crontab -e

編寫定時任務以下：

*/10 * * * * /usr/sbin/ntpdate hadoop102

（2）修改任意機器時間

[root@hadoop103桌面]# date -s "2017-9-11 11:11:11"

（3）十分鐘後查看機器是否與時間服務器同步

[root@hadoop103桌面]# date

說明：測試的時候能夠將10分鐘調整爲1分鐘，節省時間。

b、屬性：hbase.master.maxclockskew設置更大的值(不建議)

<property>         <name>hbase.master.maxclockskew</name>         <value>180000</value>         <description>Time difference of regionserver from master</description> </property>

2．啓動方式2

[test@hadoop102 hbase]$ bin/start-hbase.sh

對應的中止服務：

[test@hadoop102 hbase]$ bin/stop-hbase.sh

七、查看HBase頁面

啓動成功後，能夠經過「host:port」的方式來訪問HBase管理頁面，例如：

http://hadoop102:16010