hive从0.12.0升级到1.2.1步骤详解及填坑

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

 hive升级步骤详解(hive-0.12.0到hive-1.2.1)

升级步骤:

1.关闭当前与hive相关的所有进程

2.备份MySQL的hive数据库

mysqldump -uroot -proot hive > schem_hive-0.12.0.sql

方便升级失败之后回滚。

3.修改环境变量HIVE_HOME

4.解压1.2.1的安装包, 

进入目录: hive-1.2.1/scripts/metastore/upgrade/mysql/

下面有如下的脚本:

upgrade-0.12.0-to-0.13.0.mysql.sql

upgrade-0.13.0-to-0.14.0.mysql.sql

upgrade-0.14.0-to-1.1.0.mysql.sql

upgrade-1.1.0-to-1.2.0.mysql.sql

 

执行脚本:

mysql -uroot -proot hive <upgrade-0.12.0-to-0.13.0.mysql.sql

操作成功Finished upgrading MetaStore schema from 0.12.0 to 0.13.0

此时数据库的结构只适应0.13系列的,可以选择做个备份:

mysqldump -uroot -proot hive > schem_hive-0.13.0.sql

下面依次执行:

mysql -uroot -proot hive <upgrade-0.13.0-to-0.14.0.mysql.sql

mysqldump -uroot -proot hive > schem_hive-0.14.0.sql

 

mysql -uroot -proot hive <upgrade-0.14.0-to-1.1.0.mysql.sql

mysqldump -uroot -proot hive > schem_hive-1.1.0.sql

 

mysql -uroot -proot hive <upgrade-1.1.0-to-1.2.0.mysql.sql

mysqldump -uroot -proot hive > schem_hive-1.2.0.sql

 

报错ERROR 1005 (HY000) at line 4 in file: '019-HIVE-7784.mysql.sql': Can't create table 'hive.PART_COL_STATS' (errno: 150)

查看PART_COL_STATS创建表sql,错误原因是hive-schema-0.13.0.mysql.sql中的PARTITIONS表创建不成功导致PART_COL_STATS缺少外键,手动创建PARTITIONS表即可。

 

5.拷贝 之前版本的mysql connector jar包到 现在hive的lib 目录,将之前版本配置好的hive-site.xml,hive-env.xml与hive-log4j.properties放回现在hive的conf下

 

hive升级完成。 

转载于:https://my.oschina.net/zlhblogs/blog/686476

你可能感兴趣的:(hive从0.12.0升级到1.2.1步骤详解及填坑)