2019独角兽企业重金招聘Python工程师标准>>>
hive升级步骤详解(hive-0.12.0到hive-1.2.1)
升级步骤:
1.关闭当前与hive相关的所有进程
2.备份MySQL的hive数据库
mysqldump -uroot -proot hive > schem_hive-0.12.0.sql
方便升级失败之后回滚。
3.修改环境变量HIVE_HOME
4.解压1.2.1的安装包,
进入目录: hive-1.2.1/scripts/metastore/upgrade/mysql/
下面有如下的脚本:
upgrade-0.12.0-to-0.13.0.mysql.sql
upgrade-0.13.0-to-0.14.0.mysql.sql
upgrade-0.14.0-to-1.1.0.mysql.sql
upgrade-1.1.0-to-1.2.0.mysql.sql
执行脚本:
mysql -uroot -proot hive <upgrade-0.12.0-to-0.13.0.mysql.sql
操作成功Finished upgrading MetaStore schema from 0.12.0 to 0.13.0
此时数据库的结构只适应0.13系列的,可以选择做个备份:
mysqldump -uroot -proot hive > schem_hive-0.13.0.sql
下面依次执行:
mysql -uroot -proot hive <upgrade-0.13.0-to-0.14.0.mysql.sql
mysqldump -uroot -proot hive > schem_hive-0.14.0.sql
mysql -uroot -proot hive <upgrade-0.14.0-to-1.1.0.mysql.sql
mysqldump -uroot -proot hive > schem_hive-1.1.0.sql
mysql -uroot -proot hive <upgrade-1.1.0-to-1.2.0.mysql.sql
mysqldump -uroot -proot hive > schem_hive-1.2.0.sql
报错ERROR 1005 (HY000) at line 4 in file: '019-HIVE-7784.mysql.sql': Can't create table 'hive.PART_COL_STATS' (errno: 150)
查看PART_COL_STATS创建表sql,错误原因是hive-schema-0.13.0.mysql.sql中的PARTITIONS表创建不成功导致PART_COL_STATS缺少外键,手动创建PARTITIONS表即可。
5.拷贝 之前版本的mysql connector jar包到 现在hive的lib 目录,将之前版本配置好的hive-site.xml,hive-env.xml与hive-log4j.properties放回现在hive的conf下
hive升级完成。