hive初级

1.安装mysql数据库

　　1.1 查看本机是否安装了mysql数据库（rpm -qa | grep mysql）

　　　　

　　1.2 删除系统自带的mysql数据库(rpm -e --nodeps mysql-libs-5.1.66-2.el6_3.x86_64)

　　　　

　　1.3 解压mysql.zip文件，并添加执行权限（使用unzip命令进行解压.zip文件，）

　　　　

　　　　

　　1.4 安装mysql服务端（使用rpm -ivh 安装.rpm文件）

　　　　

　　　　当安装完之后会有以下提示，有个随机的密码放入了/root/.mysql_secret文件中

　　　　

　　　　启动mysql服务端

　　　　

　　1.4 安装mysql客户端并修改root用户的密码

　　　　

　　　　连接到mysql服务器

　　　　

　　　　

　　　　修改root用户的密码为root，并退出后重新使用root的新密码登录

　　1.5 修改mysql运行登录的主机

　　　　

　　　　

　　　　

　　　　

　　　　刷新mysql的权限策略

　　　　

2.安装hive,并将元素数放在mysql数据库中

　　2.1 将mysql驱动jar放到hive安装目录下的lib目录中

　　　　

　　2.2 修改/opt/modules/hive-0.13.1-bin/conf/hive-env.sh文件，设置hadoop安装目录和hive配置目录

　　　　

　　2.3 配置hive元数据所在的数据库，修改/opt/modules/hive-0.13.1-bin/conf/hive-site.xml(如果不存在，则进行创建)

　　　　
　　　　
　　　　

    　　　　
    　　　　
      　　　　　　javax.jdo.option.ConnectionURL
      　　　　　　jdbc:mysql://life-hadoop.life.com:3306/metastore?createDatabaseIfNotExist=true
    　　　　

    　　　　
    　　　　
      　　　　　　javax.jdo.option.ConnectionDriverName
      　　　　　　com.mysql.jdbc.Driver
    　　　　

    　　　　
    　　　　
      　　　　　　javax.jdo.option.ConnectionUserName
      　　　　　　root
    　　　　

    　　　　
    　　　　
      　　　　　　javax.jdo.option.ConnectionPassword
      　　　　　　root
    　　　　

　　　　　
    　　　
      　　　　hive.cli.print.header
      　　　　true
    　　　

    　　　
    　　  
      　　　　hive.cli.print.current.db
      　　　　true
    　　  

　　　　

　　2.4 修改hive的日志文件所在的目录，修改/opt/modules/hive-0.13.1-bin/hive-log4j.properties文件

　　　　

　　2.5 创建hive表数据所在的文件夹

　　　　在hdfs上创建 /tmp 和 /user/hive/warehouse目录，并赋予g+w的权限

　　2.6 查看是否配置成功

　　　　启动hive客户端

　　　　　　

　　　　查看mysql数据库

　　　　　　

3.hive操作

　　3.1 基本操作

　　　　3.1.1 创建数据库 create databases hive

　　　　　　

　　　　3.1.2 创建表 create table hive.student (id int,name string,age int,sex string,address string) row format delimited fields terminated by '\t';

　　　　　　

　　　　3.1.3 加载数据到表中 load data local inpath '/opt/data/student.txt' overwrite into table hive.student;

　　　　　　

　　　　3.1.4 查看表的描述信息 desc formatted hive.student;

　　　　　　

　　　　3.1.5 查看表的详细信息 desc formatted hive.student;

　　　　　　

　　　　3.1.6 查看hive中自带的函数 show functions;

       3.1.7  hive的交互方式

　　 1 bin/hive 进入hive交互命令行环境

　　 2 bin/hive -e 'select * from hive.student;' （可以通过 > 将结果写入到指定的文件中）

　　　 　

　　 3 bin/hive -f /opt/data/hive-select.sql （可以通过 > 将结果写入到指定的文件中）