Hive之DML操作详解

1.概念区分:
①DML(Data Manipulation Language)
数据操纵语言 :主要用来对数据库的数据进行一些操作，常用的就是INSERT、UPDATE、DELETE。
②DDL(Data Define Language)
数据定义语言:常用的有CREATE和DROP，用于在数据库中创建新表或删除表，以及为表加入索引等
③DCL(Data Control Language)
数据控制语言：通过GRANT和REVOKE，确定单个用户或用户组对数据库对象的访问权限

2.数据导入
(1)向表中装载数据(load)

hive>load data [local] inpath '/opt/datas/student.txt' [overwrite] into table student [partition (partcol1=val1,…)];

load data:表示加载数据
local:表示从本地加载数据到 hive 表；否则从 HDFS 加载数据到 hive 表
inpath:表示加载数据的路径
into table:表示加载到哪张表
student:表示具体的表
overwrite:表示覆盖表中已有数据，否则表示追加
partition:表示上传到指定分区
注意:如果文件是在本地，文件不会被删除，如果是在HDFS上，会被剪切

(2)通过查询语句向表中插入数据（Insert）
①创建一张分区表

hive (default)> create table student(id string, name string) partitioned by 
(month string) row format delimited fields terminated by '\t';

②基本插入数据

hive (default)> insert into table student partition(month='201709') 
values('1004','zhaoliu');

③基本模式插入（根据单张表查询结果）

hive (default)> insert overwrite table student partition(month='201708')
 select id, name from student where month='201709';

④多插入模式(根据多张表查询结果)

hive (default)> from student
 insert overwrite table student partition(month='201707')
 select id, name where month='201709'
 insert overwrite table student partition(month='201706')
 select id, name where month='201709';

⑤插入分区

from student 
insert overwrite table student PARTITION (year, month)
select *,'2018','09';

(3)查询语句中创建表并加载数据（as select）
根据查询结果创建表（查询的结果会添加到新创建的表中）

create table if not exists student3
as select id, name from student;

(4)创建表时通过 location 指定加载数据路径
①创建表，并指定在 hdfs 上的位置

hive (default)> create table if not exists student5(
 id int, name string
 )
 row format delimited fields terminated by '\t'
 location '/user/hive/warehouse/student5';

②上传数据到 hdfs 上

hive (default)> dfs -put /opt/datas/student.txt /user/hive/warehouse/student5;

③查询数据

hive (default)> select * from student5;

3.数据导出
(1)Insert 导出
①将查询的结果导出到本地

hive (default)> insert overwrite local directory '/opt/datas/export/student'
 select * from student;

②将查询的结果格式化导出到本地

hive (default)> insert overwrite local directory '/opt/datas/export/student1'
 ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'
 COLLECTION ITEMS TERMINATED BY '\n'
 select * from student;

③将查询的结果导出到 HDFS 上(没有 local)

hive (default)> insert overwrite directory '/user/hive/warehouse/student2'
 ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' 
 COLLECTION ITEMS TERMINATED BY '\n'
 select * from student;

(2) Hadoop 命令导出到本地

 dfs -get /user/hive/warehouse/student/month=201709/000000_0 
/opt/datas/export/student3.txt;

(3)Hive Shell 命令导
基本语法:hive -f/-e 执行语句或者脚本 > file

[root@lyx2 hive120]$ bin/hive -e 'select * from default.student;' > 
/opt/datas/export/student4.txt;

(4)Export 导出到 HDFS 上

hive (default)> export table default.student to '/user/hive/warehouse/export/student';

(5)其他工具导出
如sqoop
(6)清除表中数据(Truncate)
注意:Truncate 只能删除管理表，不能删除外部表中数据。