解决使用 Navicat 导入大数据文件不全和 乱码问题

背景:

从Oracle导出单表的数据为49万多(如:图一)的数据,用toad导出excel每次都说out of memory,所以就导出txt格式,然后用navicat导入这个txt格式的文件到mysql数据库。
图一

问题有两个

第一个问题: 第一次导入的时候,中文字符是乱码,查看以下几点:
解决方法:

  • 表中该字段的字符集是否是utf8或者是utf8mb4,发现是latin,修改过来,但还是乱码
  • 发现源文件并不是乱码,导入时候是乱码,源文件用记事本打开,另存时候,将编码为ANSI改成UTF8,保存之后,在导入,导入没有乱码了
    解决使用 Navicat 导入大数据文件不全和 乱码问题_第1张图片
    第二个问题:虽然导入数据库,中文字段不是乱码了,但数据量少了好多,源库有49万多的数据,只导入5.5万的数据,就停止了,而且没有报错,说是成功
  • 将txt文件用记事本打开,再另存(注意编码还是UTF8),保存为csv格式,比如:test.txt变成test.csv,然后再用navicat导入,以txt格式导入,就可以成功导入数据了(如图三)。
    解决使用 Navicat 导入大数据文件不全和 乱码问题_第2张图片
    目标端数据库验证(如图四):
    ±---------+
    | count(1) |
    ±---------+
    | 497051 |
    ±---------+
    1 row in set (0.16 sec)
    解决使用 Navicat 导入大数据文件不全和 乱码问题_第3张图片

你可能感兴趣的:(解决使用 Navicat 导入大数据文件不全和 乱码问题)