hive的部署与安装教程（hive2.3.7的安装和配置）

前期准备：首先安装好hadoop相应的版本，这个之前我已经发过，可惜没有通过，这个我后续会再发，然后安装jdk也是必须的，这里我们选用MySQL作为元数据库，将mySql和Hive安装在master服务器上，所以MySQL数据库我在昨天的文章中已经介绍了，如果需要可以查看，如果需要MySQL源码安装我后续也会发。

1． 下载hive安装文件，然后解压，命令如下：

tar -zxvf apache-hive-1.2.1-bin.tar.gz

2． 配置环境变量，命令如下：

vim /etc/profile

export HIVE_HOME=/opt/hive-1.2.1

export PATH=$PATH:$HIVE_HOME/bin

source /etc/profile 让刚刚的配置生效；

3． 接下来进入配置文件/conf文件夹里面，conf文件里有4个需要修改的配置文件：hive-default.xml.template是默认模板，hive-env.sh.template是hive-env.sh默认配置，hive-exec-log4j.properties.template是exec默认配置，hive-log4j.properties.template是log默认配置；

4． 接下来也可以不做任何修改hive也能运行，默认的配置元数据是存放在Derby数据库里面的，由于改用mysql来存储我们的元数据，以及修改数据存放位置和日志存放位置等使得我们必须配置自己的环境，配置如下：

进入conf目录下，cp hive-default.xml.template hive-site.xml

cp hive-env.sh.template hive-env.sh

cp hive-exec-log4j.properties.template hive-exec-log4j.properties

cp hive-log4j.properties.template hive-log4j.properties

5． 修改 hive-env.sh

vim hive-env.sh

export HADOOP_HOME=/opt/hadoop-2.7.1

export HIVE_CONF_DIR=/opt/hive-1.2.1/conf

6． 修改 hive-log4j.properties

mkdir logs

vim hive-log4j.properties

hive.log.dir=/opt/hive-1.2.1/logs

7． 修改 hive-site.xml

vim hive-site.xml

<configuration>

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/opt/hive-1.2.1/warehouse</value>

</property>

<property>

<name>hive.exec.scratchdir</name>

<value>/opt/hive-1.2.1/scratchdir</value>

</property>

<property>

<name>hive.querylog.location</name>

<value>/opt/hive-1.2.1/logs</value>

</property>

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value> jdbc:mysql://master:3306/hivedb?createDatabaseIfNotExist=true</value>

</property>

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

</property>

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root(填自己的用户名)</value>

</property>

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456(填自己的密码)</value>

</property>

<property>

<name>hive.aux.jars.path</name>

<value>file:///opt/hive-1.2.1/lib/hive-hbase-handler-1.2.1.jar,file:///opt/hive-1.2.1/lib/hbase-client-1.0.0.jar,file:///opt/hive-1.2.1/lib/hbase-common-1.0.0.jar,file:///opt/hive-1.2.1/lib/hbase-common-1.0.0-tests.jar,file:///opt/hive-1.2.1/lib/hbase-protocol-1.0.0.jar,file:///opt/hive-1.2.1/lib/hbase-server-1.0.0.jar,file:///opt/hive-1.2.1/lib/htrace-core-3.1.0-incubating.jar,file:///opt/hive-1.2.1/lib/zookeeper-3.4.6.jar,file:///opt/hive-1.2.1/lib/protobuf-java-2.5.0.jar,file:///opt/hive-1.2.1/lib/guava-12.0.1.jar</value> </property></configuration>

hive.metastore.warehouse.dir：指定hive的数据存储目录，指定的是HDFS上的位置，默认值：/user/hive/warehouse，为了便于管理，hive-1.2.1文件下创建文件warehouse。

hive.exec.scratchdir：指定hive的临时数据目录，默认位置为：/tmp/hive-${user.name}。为了便于管理，hive-1.2.1文件下创建文件scratchdir。

javax.jdo.option.ConnectionURL：指定hive连接的数据库的数据库连接字符串

javax.jdo.option.ConnectionDriverName：指定驱动的类入口名称

hive.aux.jars.path：是与hbase整合的时候需要用到的jar包，必须加上(hbase已经在钱的文章中已经介绍了如何安装)

8． 复制hbase库到hive下面

cp $HBASE_HOME/lib/hbase-* $HIVE_HOME/lib/

cp $HBASE_HOME/lib/htrace-core-3.1.0-incubating.jar $HIVE_HOME/lib/

cp $HBASE_HOME/lib/zookeeper-3.4.6.jar $HIVE_HOME/lib/

cp $HBASE_HOME/lib/protobuf-java-2.5.0.jar $HIVE_HOME/lib/

cp $HBASE_HOME/lib/guava-12.0.1.jar $HIVE_HOME/lib/

并删除原HIVE_HOME/lib/下的guava-14.0.1.jar。

9． 默认hive使用Derby数据库存放元数据，并且也集成了Derby数据库及连接驱动jar包，但此处我们换成了MySQL作为数据库，所以还必须得有MySQL的JDBC驱动包。

10．将hive复制到slave1节点和slave2节点上

11．执行hive命令，如果正常输出表示安装成功，如果出现java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected这个错误表示hive 的 jline-xxx.jar 和hadoop的jline-xxx.jar 版本不一致 把$hive_home/lib下的jline-xxx.jar 复制到$hadoop_home/share/hadoop/yarn/lib下 重启hive。