【大数据学习笔记-4】电商数据从阿里云RDS数据库复制到华为云RDS数据库,部分表格复制失败

【问题背景】

昨天用华为云CDM服务把阿里云上一个电商客户RDS mysql数据库复制到华为云上备份,提示有部分数据表复制失败了。

【大数据学习笔记-4】电商数据从阿里云RDS数据库复制到华为云RDS数据库,部分表格复制失败_第1张图片

【原因分析】

通过华为云迁移服务CDM发现了哪些表格迁移失败,能看到是完成复制了多少行。

【大数据学习笔记-4】电商数据从阿里云RDS数据库复制到华为云RDS数据库,部分表格复制失败_第2张图片

进一步查看日志,发现有个字符是4字节的。根据经验,推测是移动APP的emoji表情。

【大数据学习笔记-4】电商数据从阿里云RDS数据库复制到华为云RDS数据库,部分表格复制失败_第3张图片

检查数据库的字符编码是utf-8,在数据库中占用3个字节,因此4字节的汉字就无法存储,导致了数据库报错。

查询命令:show variables like 'character_set_database'

【大数据学习笔记-4】电商数据从阿里云RDS数据库复制到华为云RDS数据库,部分表格复制失败_第4张图片

 

解决办法:

1、将数据库的编码格式由utf8改为utf8mb4

2、重新触发迁移。

 

测试结果:

1、在华为云RDS实例中重新建一个数据库,编码格式为utf8mb4,校验规则utf8mb4_bin。如果是改的数据库编码,可能需要重重启才生效。

2、华为云CDM迁移设置界面的 本地加速API关闭。

2、CDM再次迁移正常。

 

 

。。

你可能感兴趣的:(mysql数据库,大数据)