Hadoop 2.7.6 上安装 hive 2.3.0

1 安装配置mysql

安装mysql

2 hive2.3.0 下载

hive2.3.0下载

3 解压

Hadoop 2.7.6 上安装 hive 2.3.0_第1张图片
将文件夹名字改为 hive

4 配置环境变量

/etc/profile

export HIVE_HOME=/home/hadoop/apps/hive
export PATH=$PATH:$HIVE_HOME/bin

命令行输入 source /etc/profile

5 下载 jdbc connector

jdbc connector 下载
将它拷贝到 hive/lib
Hadoop 2.7.6 上安装 hive 2.3.0_第2张图片

6 修改hive配置文件

6.1 复制初始化文件并重命名

目录切换到 /home/hadoop/apps/hive/conf

cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml
cp hive-log4j2.properties.template hive-log4j2.properties
cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

6.2 修改 hive-env.sh 文件

export JAVA_HOME=/usr/apps/jdk1.8.0_181-amd64
export HADOOP_HOME=/home/hadoop/apps/hadoop-2.7.6
export HIVE_HOME=/home/hadoop/apps/hive
export HIVE_CONF_DIR=/home/hadoop/apps/hive/conf

6.3 在hdfs中创建目录,并授权,用于存储文件

启动hadoop

hdfs dfs -mkdir -p /user/hive/warehouse
hdfs dfs -mkdir -p /user/hive/tmp
hdfs dfs -mkdir -p /user/hive/log
hdfs dfs -chmod -R 777 /user/hive/warehouse
hdfs dfs -chmod -R 777 /user/hive/tmp
hdfs dfs -chmod -R 777 /user/hive/log

hdfs dfs -chmod -R 777 /user

6.4 修改hive-site.xml

<property>
    <name>hive.exec.scratchdirname>
    <value>/user/hive/tmpvalue>
property>

<property>
    <name>hive.metastore.warehouse.dirname>
    <value>/user/hive/warehousevalue>
property>
<property>
    <name>hive.querylog.locationname>
    <value>/user/hive/logvalue>
property>
<property>
    <name>javax.jdo.option.ConnectionURLname>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&characterEncoding=UTF-8&useSSL=falsevalue>
  property>

    javax.jdo.option.ConnectionDriverName
    com.mysql.jdbc.Driver
<property>
    <name>javax.jdo.option.ConnectionUserNamename>
    <value>rootvalue>
  property>
<property>
    <name>javax.jdo.option.ConnectionPasswordname>
    <value>rootvalue>
  property>

创建 tmp 文件夹 ,并修改权限
mkdir -p /home/hadoop/apps/hive/tmp
chmod -R 777 /home/hadoop/apps/hive/tmp

  • 将hive-site.xml文件中的${system:java.io.tmpdir}替换为hive的临时目录 /home/hadoop/apps/hive/tmp
  • 把 {system:user.name} 改成 {user.name}

7 初始化 hive

schematool -dbType mysql -initSchema
发现包冲突
Hadoop 2.7.6 上安装 hive 2.3.0_第3张图片
删掉 /hive/lib 目录下 这个 jar 包
然后删掉hive 数据库,重新运行初始化命令
Hadoop 2.7.6 上安装 hive 2.3.0_第4张图片

8 启动 hive

8.1 方式一

命令行直接输入 hive
Hadoop 2.7.6 上安装 hive 2.3.0_第5张图片

8.2 方式二,使用 beeline

必须先对hadoop的core-site.xml进行配置,在文件里面添加并保存

<property>
  <name>hadoop.proxyuser.hadoop.groupsname>
  <value>*value>
property>
<property>
  <name>hadoop.proxyuser.hadoop.hostsname>
  <value>*value>
property>

先启动 hiveserver2
这里写图片描述
Hadoop 2.7.6 上安装 hive 2.3.0_第6张图片

你可能感兴趣的:(#,Hive学习笔记)