个人整理Hive安装手册(1)--后期不断更新

1.上传tar包

2.解压
    tar -zxvf hive-1.2.1.tar.gz
3.安装mysql数据库
   推荐yum 在线安装(运行脚本安装)

4.配置hive
    (a)配置HIVE_HOME环境变量  
        vi conf/hive-env.sh 
        配置其中的$hadoop_home

    
    (b)配置元数据库信息  
        vi  hive-site.xml 
        添加如下内容:
        
        
        javax.jdo.option.ConnectionURL
        jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true
        JDBC connect string for a JDBC metastore
        

        
        javax.jdo.option.ConnectionDriverName
        com.mysql.jdbc.Driver
        Driver class name for a JDBC metastore
        

        
        javax.jdo.option.ConnectionUserName
        root
        username to use against metastore database
        

        
        javax.jdo.option.ConnectionPassword
        root
        password to use against metastore database
        

        
    
5.安装hive和mysq完成后,将mysql的连接jar包拷贝到$HIVE_HOME/lib目录下
    如果出现没有权限的问题,在mysql授权(在安装mysql的机器上执行)
    mysql -uroot -p
    
    设置密码
    set password=password('root');
    
    #(执行下面的语句  *.*:所有库下的所有表   %:任何IP地址或主机都可以连接)
    GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;
    
    FLUSH PRIVILEGES;
    
    
    通过mysql -uroot -proot
    
    
6. Jline包版本不一致的问题,需要拷贝hive的lib目录中jline.2.12.jar的jar包替换掉hadoop中的 
    6.1、 cp hive/lib/jline-2.12.jar /opt/software/hadoop-2.6.4/share/hadoop/yarn/lib/
    6.2、装hive和mysq完成后,将mysql的连接jar包拷贝到$HIVE_HOME/lib目录下

-------------------------------------------------------------------------------------------------------

启动hive
bin/hive
----------------------------------------------------------------------------------------------------
Hive几种使用方式:
    1.Hive交互shell      bin/hive
    
    2.Hive JDBC服务(参考java jdbc连接mysql)
    
    3.hive启动为一个服务器,来对外提供服务
        bin/hiveserver2
        nohup bin/hiveserver2 1>/var/log/hiveserver.log 2>/var/log/hiveserver.err &
        
        启动成功后,可以在别的节点上用beeline去连接
        bin/beeline -u jdbc:hive2://mini1:10000 -n root
        
        或者
        bin/beeline
        ! connect jdbc:hive2://mini1:10000
    
    4.Hive命令 
        hive  -e  ‘sql’
        bin/hive -e 'select * from t_test'

创建表:
        内部表--删除之后数据全部丢失
        CREATE  TABLE [IF NOT EXISTS] table_name
        
        外部表--删除元数据之后源数据还存在
        CREATE EXTERNAL TABLE [IF NOT EXISTS] table_name LOCATION hdfs_path
        1、结构一样,但是数据不一样  ----like
            create table bws like te;
        2、结构一样,数据也一样----as
            create table bws2 as select * from tes;

            
设置表结构:一定按照这个顺序来

ROW FORMAT DELIMITED : 行格式分隔
FIELDS TERMINATED BY ’,’ : 字段之间使用空格分隔
COLLECTION ITEMS TERMINATED BY ‘,’ : 集合(就是这的数据)使用逗号分隔
MAP KEYS TERMINATED BY ‘:’ : 键值对使用冒号分隔
LINES TERMINATED BY ‘\t’ : 记录之间使用换行符分隔

Hive 查看表描述

DESCRIBE [EXTENDED|FORMATTED] table_name
    extended
    formatted

table-type:查看创建表的类型

补充:临时表
        在当前进程中可以对数据进行相应的操作,但是退出hive时,就自动删除
        create TEMPORARY table name-----一定是一张内部表
 

后期会不断更新相关的内容,对Java、大数据比较感兴趣的朋友可以关注我

公众号:Java架构师联盟

码云上会不断的上传一些资料,有需要的,码云地址: https://gitee.com/biwangsheng/personal

你可能感兴趣的:(git,程序员,hive,大数据,数据库)