使用Sqoop-1.4.4將Sqlserver2008中數據導入到Hbase上

1.設置環境變量

#set Environment
export JAVA_HOME=/usr/java/jdk1.7.0_45
export HADOOP_INSTALL=/home/luffy/Development/hadoop-1.2.1
export HADOOP_COMMON_HOME=$HADOOP_INSTALL
export HADOOP_MAPRED_HOME=$HADOOP_INSTALL
export SQOOP_HOME=/home/luffy/Development/sqoop-1.4.4.bin__hadoop-1.0.0
export HIVE_HOME=/home/luffy/Development/hive-0.11.0
export HBASE_HOME=/home/luffy/Development/hbase-0.94.13
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$HADOOP_INSTALL/bin:$SQOOP_HOME/bin:$HIVE_HOME/bin:$HBASE_HOME/bin:$PATH

2.更改配置文件"hbase-site.xml"

<configuration>
	<property>
		<name>hbase.rootdir</name>
		<value>hdfs://localhost:9000/user/hbase</value>
		<description>The directory shared by RegionServers.
		</description>
	</property>
	<property>
		<name>dfs.replication</name>
		<value>1</value>
		<description>The replication count for HLog and HFile storage. Should not be greater than HDFS datanode count.
		</description>
	</property>
</configuration>

3.啓動hadoop

start-all.sh

4.啓動hbase

start-hbase.sh

5.執行命令

sqoop import --connect 'jdbc:sqlserver://192.168.10.164:1433;username=sa;password=12345678;database=demo'
--table TAB_USER 
--hbase-table TabUser 
--hbase-create-table 
--hbase-row-key F_ID 
--column-family cf

6.注：因爲 HBase 依賴 Hadoop，它配套發佈了一個Hadoop jar 文件在它的 lib 下。該套裝jar僅用於獨立模式。在分佈式模式下，Hadoop版本必須和HBase下的版本一致。用你運行的分佈式Hadoop版本jar文件替換HBase lib目錄下的Hadoop jar文件，以免版本不匹配問題。確認替換了集羣中全部HBase下的jar文件。Hadoop版本不匹配問題有不一樣表現，但看起來都像掛掉了。