Hadoop Hive入门

0目录

1.linux 安装hive 2.hive入门 3.hive高级语法1

1.linux 安装hive

先确保linux虚拟机中已经安装jdk；mysql和hadoop 并可以成功启动hadoop和mysql

下载hive对应版本到opt/install目录下并解压到opt/soft目录下

重命名 hive312

配置profile 文件，加入hive环境变量 vim /etc.profile 更新资源 source /etc/profile

拷贝mysql connector 到cd/opt/soft/hive312/lib目录下

进入 cd/opt/soft/hive312/conf目录 新建vim ./hive-site.xml 编辑

cd /opt/soft/hadoop313目录下查找juava*开头的文件

cd /opt/soft/hive312/lib目录下删除

拷贝juava* (确保版本相同) cp /opt/soft/hadoop313/share/hadoop/common/lib/guava-27.0-jre.jar ./

初始化hive hive初始化 [root@kb129 hive312]# schematool -dbType mysql -initSchema

输入hive命令

show databases;

启动metastore和hiveserver2

与数据库建立连接

2.hive基本语法

查看数据库

选择数据库

创建表和添加数据

强制删除某个数据库

产看表信息

覆盖原有数据

重命名表名和添加和替换列名

创建内部表

指定上传路径（两种方式）location(hdfs路径) 和load data local inpath（虚拟机路径）

分区表(手动分区，根据一个字段名)

分区表(手动分区，根据多个字段名) ；添加和删除分区

动态分区 创建studenttp 导入数据

创建studenttp1 指定分区字段（age和gender）

插入数据完成

创建外外部表 路径为hdfs路径

内部表和外部表区别 删除内部表时，表结构和文件同时被删除，外部表只删除表结构

练习（内部表，路径是虚拟机系统路径）

外部表（路径是hdfs路径） 记得上传  cd/opt/kb23路径下 hdfs dfs -put ./employee.txt /user/hive/warehouse/kb23hivedb.db/stu/employeefile

union拼接查询结果

写法2

将r1的结果作为r2查询的表（类似sqi子查询）

子查询（先性别男然后名字will） 结果

3.hive高级查询1

删除、修改表

分桶表

创建分桶表 Hdfs查看 随机

创建视图

侧视图

CTE查询

关联查询

Union

hive四大排序

补充in和exists exists的返回值是true和false

wordCount案例 新建表结构和加载数据

Case when语句

列转行

练习 新建App表和userapp表