CentOS安裝Hive

一、環境和軟件準備:html

    hive版本:apache-hive-2.3.6-bin.tar.gz,下載地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hive/java

    hadoop版本:hadoop-2.9.2.tar.gzmysql

    JDK版本:jdk-8u221-linux-x64.tar.gzlinux

    mysql版本:8.xsql

    hive-2.x與hadoop-2.x匹配,hive-3.x與hadoop-3.x匹配。數據庫主要是存放hive的元數據,可選,本文以mysql爲例。數據庫

二、安裝MySQL並建立hive數據庫apache

    詳細安裝見:CentOS下安裝mysql5.7和mysql8.x服務器

三、安裝Hadoopoop

    詳細安裝見:CentOS安裝Hadoopspa

四、解壓並配置Hive

     將安裝文件解壓到/usr/local/目錄,並從新命名爲apache-hive-2.3.6

cd /usr/local/ tar -zxvf /var/ftp/pub/apache-hive-2.3.6-bin.tar.gz mv apache-hive-2.3.6-bin/ apache-hive-2.3.6/

     配置hive-log4j2.properties和hive-site.xml

cd /usr/local/apache-hive-2.3.6/conf/ cp hive-log4j2.properties.template hive-log4j2.properties vi hive-site.xml

     hive-site.xml內容(也能夠從hive-default.xml.template拷貝,但咱們只須要配置幾項,其餘配置默認便可)爲:

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://192.168.107.144:3306/hive?createDatabaseIfNotExist=true</value>
 </property>
 <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
  <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>abc123</value>
  </property>
</configuration>

五、初始化數據庫

     下載並拷貝protobuf-java-3.6.1.jar和mysql-connector-java-8.0.17.jar到$HIVE_HOME/lib目錄下,刪除已有的protobuf-java-2.5.0.jar文件。統一hive和mysql服務的時區。

ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime // hive和mysql服務器都要執行,mysql要重啓服務 cd /usr/local/apache-hive-2.3.6/bin/ schematool -dbType mysql -initSchema

    命令執行完成後hive將生產如下表:

    到這,hive算安裝完成了,後面就對hive的操做。

六、Hive基本操做(先啓動hadoop和mysql)

     進入hive命令行

      查詢全部全部數據庫

     無報錯,Hive安裝完成。

七、使用hiveserver2和beeline

    修改$HADOOP_HOME/etc/hadoop/core-site.xml文件,增長以下配置:

<property>
    <name>hadoop.proxyuser.root.hosts</name>
    <value>*</value>
  </property>
  <property>
    <name>hadoop.proxyuser.root.groups</name>
    <value>*</value>
  </property>

    啓動hiveserver2:

cd /usr/local/apache-hive-2.3.6/bin/ hiveserver2 hiveserver2 & // 之後臺形式運行

    進入beeline命令行:

beeline -u jdbc:hive2://192.168.107.143:10000

相關文章
相關標籤/搜索