一、环境和软件准备:html
hive版本:apache-hive-2.3.6-bin.tar.gz,下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hive/java
hadoop版本:hadoop-2.9.2.tar.gzmysql
JDK版本:jdk-8u221-linux-x64.tar.gzlinux
mysql版本:8.xsql
hive-2.x与hadoop-2.x匹配,hive-3.x与hadoop-3.x匹配。数据库主要是存放hive的元数据,可选,本文以mysql为例。数据库
二、安装MySQL并建立hive数据库apache
详细安装见:CentOS下安装mysql5.7和mysql8.x服务器
三、安装Hadoopoop
详细安装见:CentOS安装Hadoopspa
四、解压并配置Hive
将安装文件解压到/usr/local/目录,并从新命名为apache-hive-2.3.6
cd /usr/local/ tar -zxvf /var/ftp/pub/apache-hive-2.3.6-bin.tar.gz mv apache-hive-2.3.6-bin/ apache-hive-2.3.6/
配置hive-log4j2.properties和hive-site.xml
cd /usr/local/apache-hive-2.3.6/conf/ cp hive-log4j2.properties.template hive-log4j2.properties vi hive-site.xml
hive-site.xml内容(也能够从hive-default.xml.template拷贝,但咱们只须要配置几项,其余配置默认便可)为:
<?xml version="1.0" encoding="UTF-8" standalone="no"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://192.168.107.144:3306/hive?createDatabaseIfNotExist=true</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>abc123</value> </property> </configuration>
五、初始化数据库
下载并拷贝protobuf-java-3.6.1.jar和mysql-connector-java-8.0.17.jar到$HIVE_HOME/lib目录下,删除已有的protobuf-java-2.5.0.jar文件。统一hive和mysql服务的时区。
ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime // hive和mysql服务器都要执行,mysql要重启服务 cd /usr/local/apache-hive-2.3.6/bin/ schematool -dbType mysql -initSchema
命令执行完成后hive将生产如下表:
到这,hive算安装完成了,后面就对hive的操做。
六、Hive基本操做(先启动hadoop和mysql)
进入hive命令行
查询全部全部数据库
无报错,Hive安装完成。
七、使用hiveserver2和beeline
修改$HADOOP_HOME/etc/hadoop/core-site.xml文件,增长以下配置:
<property> <name>hadoop.proxyuser.root.hosts</name> <value>*</value> </property> <property> <name>hadoop.proxyuser.root.groups</name> <value>*</value> </property>
启动hiveserver2:
cd /usr/local/apache-hive-2.3.6/bin/ hiveserver2 hiveserver2 & // 之后台形式运行
进入beeline命令行:
beeline -u jdbc:hive2://192.168.107.143:10000