HiveDDL数据操作

1.数据库操作

1.1 创建数据库

语法:

CREATE DATABASE [IF NOT EXISTS] database_name
[COMMENT database_comment] -- 表的备注信息
[LOCATION hdfs_path] --指定数据在HDFS上存放的位置
[WITH DBPROPERTIES (property_name=property_value, ...)];

1.2 查询数据库

1.2.1 显示数据库

show databases; --显示数据库
show databases like 'bigdata*'; -- 过滤显示查询的数据库

1.2.2 查看数据库详情

desc database bigdata; -- 显示数据库信息
desc database extended bigdata; -- 显示数据库详细信息，extended
create database bigdata3 with dbproperties(“createtime”=”20211022”); -- 创建数据库bigdata3，并设置其createtime属性

1.2.3 切换当前数据库

use bigdata;

1.3 修改数据库

-- LTER DATABASE命令为某个数据库的DBPROPERTIES设置键-值对属性值，来描述这个数据库的属性信息。
alter database bigdata set dbproperties('createtime'='20211022');

1.4 删除数据库

drop database bigdata2; -- 删除空数据库
drop database if exists bigdata2; -- 如果删除的数据库不存在，最好采用 if exists判断数据库是否存在
drop database bigdata cascade; --如果数据库不为空，可以采用cascade命令，强制删除

2.表操作

2.1 创建表

建表语法

CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name 
[(col_name data_type [COMMENT col_comment], ...)] 
[COMMENT table_comment] 
[PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)] 
[CLUSTERED BY (col_name, col_name, ...) 
[SORTED BY (col_name [ASC|DESC], ...)] INTO num_buckets BUCKETS] 
[ROW FORMAT row_format] 
[STORED AS file_format] 
[LOCATION hdfs_path]
[TBLPROPERTIES (property_name=property_value, ...)]
[AS select_statement]
[LIKES existing_table_or_view_name]

• CREATE ABLE：创建一个指定名字的表。如果相同名字的表已经存在，则抛出异常；用户可以用 IF NOT EXISTS 选项来忽略这个异常
• EXTERNAL：
  • 1.关键字可以让用户创建一个外部表在建表的同时可以指定一个指向实际数据的路径（LOCATION）
  • 2.在删除表的时候，内部表的元数据和数据会被一起删除，外部表只删除元数据，不删除数据。
• COMMENT：为表和列添加注释。
• PARTITIONED BY：创建分区表。
• CLUSTERED BY：创建分通表。
• SORTED BY：不常用，对桶中的一个或多个列排序。
• ROW FROMAT：ROW FORMAT DELIMITED
  • [FIELDS TERMINATED BY char]: Fields 指定字段之间的分隔符
  • [COLLECTION ITEMS TERMINATED BY char]:Collection 用于指定集合中元素间的分隔符
  • [MAP KEYS TERMINATED BY char]: Map 用于指定map集合中键值对间的分隔符
  • [LINES TERMINATED BY char]:Lines 用于指定每行记录间的分隔符
  • | SERDE serde_name
    [WITH SERDEPROPERTIES (property_name=property_value,
    property_name=property_value, …)]: SerDe是Serialize/Deserialize的简称，用户在建表时可以自定义SerDe或使用自带的SerDe，若未指定Row Format，则用自带的SerDe。
• STORE AS：指定存储文件类型(SEQUENCEFILE、TEXTFILE、RCFILE、ORC)
• LOCATION：指定表在HDFS上的存储位置。
• AS:后跟查询语句，根据查询语句结果创建表
• LIKE:允许用户复制现有的表结构，但是不复制数据.

2.1.1 管理表(内部表)

• 默认创建的表都是所谓的管理表，有时也被称为内部表。
• 管理表，Hive会(或多或少地)控制着元数据和真实数据的生命周期。
• Hive默认会将这些表的数据存储在hive.metastore.warehouse.dir定义目录的子目录下。
• 当删除一个管理表时，Hive也会删除这个表中数据。
• a) 管理表不适合和其他工具共享数据。

2.1.2 外部表

• 表是外部表，所以Hive并非认为其完全拥有这份数据。
• 当删除该表并不会删除这份数据，会删除元数据。

2.2 修改表

ALTER TABLE table_name RENAME TO new_table_name -- 重命名表
ALTER TABLE table_name CHANGE [COLUMN] col_old_name col_new_name column_type [COMMENT col_comment] [FIRST|AFTER column_name] -- 更新列
ALTER TABLE table_name ADD|REPLACE COLUMNS (col_name data_type [COMMENT col_comment], ...)  --增加和替换列

2.3 删除表

DROP TABLE [IF EXISTS] table_name [PURGE];