Hive Shell命令之一（数据库和表的操作）

//数据库的有关操作
1、如果数据库不存在的话创建数据库，默认数据库default：
create database if not exists test;

2、查看hive中所包含的数据库：
show databases;

3、如果数据库非常多，可以用正则表达式匹配筛选出需要的数据库名。
show databases like 't.*'；

4、创建数据库并指定数据库存放位置(默认存放在hive.metastore.warehouse.dir所指定的目录)：
create database test01 location '/data1';

5、创建数据库时增加描述信息：
create database test02 comment 'this is a database named test02';

6、查看数据库的描述信息：
describe database test02;
结果：test02    this is a database named test02    hdfs://master.infobird.com:8020/user/hive/warehouse/test02.db    hdfs    USER    

7、为数据库增加一些和其相关的键值对属性信息：
create database test05 with dbproperties('name' = 'abc', 'data'='2015-12-22');
注意：键值对根据需要自定义

8、显示为数据库定义的键值对的信息：
describe database extended test05;

9、使用数据库：
use test01;

10、设置属性值使提示符里显示当前数据库：
set hive.cli.print.current.db=true;

11、如果数据库存在，删除数据库：
drop database if exists test;

12、默认情况下，hive是不允许用户删除一个包含有标的数据库的。
    用户要么先删除表再删除数据库，要么在命令中加入关键字cascade（默认是restrict）:
drop database if exists test01 cascade;

如果某个数据库删除了，其对应的目录也同时会被删除。

13、只有为数据库设置的键值对信息可以改，其他信息如数据库名，数据库所在目录都不可更改：
alter database test05 set dbproperties('name'='abcd','size'='10');

//表的有关操作
1、创建表
create table if not exists test05.employees(name string comment 'Employee name',
      salary float comment 'employee salary',
      subordinates array comment 'Names of subordinates',
      deductions map comment 'keys are deductions names, values are percentages',
      address struct comment 'Home address')
      comment 'Description of the table'
      tblproperties ('creator'='me','created_date'='2015-12-22')
      location '/user/hive/warehouse/test05.db/employees';
如果用户当前所处的数据库并非目标数据库，那么我们可以在表名钱增加一个数据库名来进行指定，如test05就是我们之前建的数据库。

2、拷贝已经存在的标的表模式，无需拷贝数据：
create table if not exists test05.employees2 like test05.employees;

3、列举当前库下的所有表：
show tables;

列举指定库下的所有表：
show tables in default;

根据正则过滤需要的表名：
show tables like 'empl.*';

4、查看表结构信息:
describe test05.employees;

查看表的结构的详细信息：
describe extended test05.employees;

查看某一列的信息：
describe test05.employees salary;

5、创建一个外部表
create external table if not exists stocks(name STRING, age INT, address STRING)
      ROW FORMAT DELIMITED FIELDS TERMINATED BY ','
      LOCATION '/data1/stocks';
这个表可以读取所有位于/data1/stocks目录下以逗号分隔的数据。
因为表是外部的，所以hive并非认为其完全拥有这份数据，因此删除该表并不会删除掉这份数据。

6、通过复制产生一张表
create external table if not exists test05.emplyees3 like test05.employees;

这里语句中如果省略掉external关键字而且源表是外部表的话，那么生成的新表也是外部表。
如果语句中省略掉external关键字而且源表是管理表的话，那么生成的新表也将是管理表。
但是，如果语句中包含有external关键字而且源表是管理表的话，那么生成的新表将是外部表。

7、创建分区表：
 create table employees(name string, age int, phone string) partitioned by (address string, city string);

如果表中数据及分区个数都非常大，执行一个所有分区的查询可能会触发一个巨大的MapReduce任务，因此建议设置
set hive.mapred.mode=strict;

8、查看所有分区：

show partitions employees;

9、查看指定分区：
show partitions employees partition(addresds='Beijing');

10、创建外部表分区：
create external table if not exists log_messages (hms int) partitioned by (year int, month int, day int) row format delimited fields terminated by '\t';

修改表

alter table log_messages add partition(year = 2015, month = 12, day = 23) location 'hdfs://data1/log_messages/2015/12/23';


11、自定义表的存储格式：
Hive的默认存储格式是文本文件格式，这个格式也可以通过可选的子句STORED AS TEXTFILE显示指定。
用户可以在创建表的时候指定各种各样的分隔符
create table employees(name string, salary float,
     subordinates array,
     deductions map,
     address struct)
     row format delimited
     fields terminated by '\001'
     collection items terminated by '\002'
     map keys terminated by '\003'
     lines terminated by '\n'
     stored as textfile;


12、删除表：
drop table if exists employees;


13、表重命名
alter table log_messages rename to logmessages;

14、增加、修改和删除分区
alter table logmessages add if not exists partition(year = 2015, month = 12, day =23) location '/logs/2015/12/23' partition (year = 2015, month = 12, day = 22) location '/logs/2015/12/22';


通过高效地移动位置来修改某个分区的路径（不会将数据从旧的路径转走，也不会删除旧的数据）：
alter table logmessages partition(year = 2015, month = 12, day = 22) set location 's3n://ourbucket/logs/2015/12/22';

删除某个分区：
alter table logmessages drop if exists partition (year = 2015, month = 12, day = 22);


15、增加列：
alter table logmessages add columns (app_name string comment 'application name');

16、修改列，对某个字段进行重命名并修改其位置、类型或者注释：
alter table logmessages change column hms hours_minutes int comment 'the hours and minutes' after app_name;

把列名hms修改为：hours_minutes， 并添加注释，位置放在列app_name 后面，若是放在第一个位置则用关键字 first代替after app_name.

17、删除或者替换列：
alter table logmessages replace columns (hms int);
这是把表中所有的列删除掉，并新加入列hms，因为是alter语句，所以只有表的元数据信息改变了，原来的分区还在。

18、修改表的属性
 alter table logmessages set tblproperties('notes' = 'the process');

19、修改表的存储属性
alter table logmessages partition(year = 2015, minth = 12, day = 22) set fileformat sequencefile;