IMP-00009: abnormal end of export file解决方案

一、概述

最近在测试环境的一个oracle数据库上面，使用exp将表导出没有问题，而将导出的文件使用imp导入时却出现了如下错误。
IMP-00009: abnormal end of export file
Import terminated successfully with warnings.

经过反复实验，终于找出问题出现的原因，是由以下几点共同造成的：
a. 数据库中参数deferred_segment_creation设置的是默认值true，即创建表的时候不立即分配段，等有行的时候才会分配段。
b. 导出的表中有分区表，而恰好该分区表存在分区没有行的情况，即有的分区没有分配段。
c. 导出时使用了direct=true。

解决办法直接看(三、解决办法)

二、问题复现

1. 准备工作

在测试库中准备两个用户，tom(导出的用户)，jerry(导入的用户)，分别给予其最大的权限。
SQL> create user tom identified by tom;
SQL> grant dba to tom;
SQL> create user jerry identified by jerry;
SQL> grant dba to jerry;

2. 检查数据库中参数deferred_segment_creation

SQL> show parameter deferred

NAME                                 TYPE        VALUE
------------------------------------ ----------- ------------------------------
deferred_segment_creation            boolean     TRUE

可以看到该参数是true，默认值。

3. 创建测试表

SQL> create table tom.t_normal as select * from scott.emp;  // 创建一张普通表，并且有行

SQL> create table tom.t_norows as select * from scott.emp where 1=0;  // 创建一张空表

SQL> create table tom.t_par(id number, name varchar2(10))
partition by list(id)
(partition p01 values(1),
partition p02 values(default));  // 创建一张分区表，两个分区

SQL> insert into tom.t_par values(1, 'aa');  // 往分区p01插入一条数据
SQL> commit;

至此，tom用户下有三张表，t_normal是普通表，t_norows是一张普通的空表，t_par是分区表。

通过下面的sql查到tom用户下只有两个segment，空表和分区表中无数据的分区都没有创建段。

SQL> select owner,segment_name,partition_name,segment_type from dba_segments where owner='TOM';

OWNER      SEGMENT_NAME         PARTITION_NAME                 SEGMENT_TYPE
---------- -------------------- ------------------------------ ------------------
TOM        T_NORMAL                                            TABLE
TOM        T_PAR                P01                            TABLE PARTITION

4. 使用tom对表进行导出

exp tom/tom file=tom.dmp log=tom_exp.log direct=true

导出日志如下(省略部分无关内容)：
. . exporting table                       T_NORMAL         14 rows exported
. . exporting table                       T_NOROWS          0 rows exported
. . exporting table                          T_PAR
. . exporting partition                            P01          1 rows exported
. . exporting partition                            P02          0 rows exported
Export terminated successfully without warnings.

5. 使用jerry对文件进行导入

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry

导入日志如下(省略部分无关内容)：
. . importing table                     "T_NORMAL"         14 rows imported
. . importing table                     "T_NOROWS"          0 rows imported
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"
IMP-00009: abnormal end of export file
Import terminated successfully with warnings.
生产上面出现的错误在这里就得到复现了。而且是在导入"T_PAR":"P02"出现的错误，这个正好印证了前面的观点。

三、解决办法

解决办法有以下两种(任一即可)：
a. 使用exp导出的时候不要加direct=true
b. 设置数据库的参数deferred_segment_creation为false(注意：这个参数只影响新建的分区表，老的分区表导出再导入仍然会报错！)

四、有时间、有兴趣的读者可以接着做实验

可能大家会问，你怎么知道是分区表的问题，又怎么知道是direct=true的问题，又怎么知道是参数deferred_segment_creation的问题？接下来我一一验证。

1. 清空jerry的表，导出tom用户下表t_normal,t_norows，再导入到jerry用户中

SQL> drop user jerry cascade;  // 通过重建jerry用户来清空jerry的表
SQL> create user jerry identified by jerry;
SQL> grant dba to jerry;

exp tom/tom file=tom.dmp log=tom_exp.log direct=true tables=t_normal,t_norows
导出日志：
. . exporting table                       T_NORMAL         14 rows exported
. . exporting table                       T_NOROWS          0 rows exported
Export terminated successfully without warnings.

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry
导入日志：
. . importing table                     "T_NORMAL"         14 rows imported
. . importing table                     "T_NOROWS"          0 rows imported
Import terminated successfully without warnings.

可以看到对这两张表导入是没有问题的

2. 清空jerry的表，导出tom用户下表t_par，再导入到jerry用户中

清空jerry的表的操作请看上面的步骤

exp tom/tom file=tom.dmp log=tom_exp.log direct=true tables=t_par
导出日志：
. . exporting table                          T_PAR
. . exporting partition                            P01          1 rows exported
. . exporting partition                            P02          0 rows exported
Export terminated successfully without warnings.

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry
导入日志：
. importing TOM's objects into JERRY
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"
IMP-00009: abnormal end of export file
Import terminated successfully with warnings.

可以看到问题就出在对这张分区表的导入上面了

3. 清空jerry的表，重新导出tom用户下表t_par，再导入到jerry用户中(这次导出不加参数direct=true)

清空jerry的表的操作请看上面的步骤

exp tom/tom file=tom.dmp log=tom_exp.log tables=t_par
导出日志：
. . exporting table                          T_PAR
. . exporting partition                            P01          1 rows exported
. . exporting partition                            P02          0 rows exported
Export terminated successfully without warnings.

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry
导入日志：
. importing TOM's objects into JERRY
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"          0 rows imported
Import terminated successfully without warnings.

可以看到这次导入没有任何问题，也就是说不加direct=true直接可以解决问题，但是如果我非要加这个参数呢，或者说这个命令写死到程序中了，没办法改怎么办？处理办法看下面第6条。

4. 清空jerry的表，在tom.t_par的p02分区中插入一条数据，重新导出tom用户下表t_par，再导入到jerry用户中(这次导出依然加参数direct=true)

清空jerry的表的操作请看上面的步骤

SQL> insert into tom.t_par values(2, 'bb');  // 往分区p02插入一条数据
SQL> commit;

通过下面的sql查到t_par两个分区都有段了。

SQL> select owner,segment_name,partition_name,segment_type from dba_segments where owner='TOM';

OWNER      SEGMENT_NAME         PARTITION_NAME                 SEGMENT_TYPE
---------- -------------------- ------------------------------ ------------------
TOM        T_PAR                P01                            TABLE PARTITION
TOM        T_PAR                P02                            TABLE PARTITION
TOM        T_NORMAL                                            TABLE

 

exp tom/tom file=tom.dmp log=tom_exp.log direct=true tables=t_par
导出日志：
. . exporting table                          T_PAR
. . exporting partition                            P01          1 rows exported
. . exporting partition                            P02          1 rows exported
Export terminated successfully without warnings.

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry
导入日志：
. importing TOM's objects into JERRY
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"          1 rows imported
Import terminated successfully without warnings.

可以看到分区表中所有分区都有数据的话，导入就没有任何问题，

5. 验证deferred_segment_creation参数对其的影响

清空jerry的表的操作请看上面的步骤

修改数据库中参数deferred_segment_creation为false
SQL> alter system set deferred_segment_creation=false;

重建tom用户的t_par表，让其一个分区有数据，另外一个分区无数据
SQL> drop table tom.t_par;

SQL> create table tom.t_par(id number, name varchar2(10))
partition by list(id)
(partition p01 values(1),
partition p02 values(default));  // 创建一张分区表，两个分区

SQL> insert into tom.t_par values(1, 'aa');  // 往分区p01插入一条数据
SQL> commit;

通过下面的sql查到t_par两个分区都有段了，即使p02分区里面没有数据

SQL> select owner,segment_name,partition_name,segment_type from dba_segments where owner='TOM';

OWNER      SEGMENT_NAME         PARTITION_NAME                 SEGMENT_TYPE
---------- -------------------- ------------------------------ ------------------
TOM        T_PAR                P01                            TABLE PARTITION
TOM        T_PAR                P02                            TABLE PARTITION
TOM        T_NORMAL                                            TABLE

 

exp tom/tom file=tom.dmp log=tom_exp.log direct=true tables=t_par
导出日志：
. . exporting table                          T_PAR
. . exporting partition                            P01          1 rows exported
. . exporting partition                            P02          0 rows exported
Export terminated successfully without warnings.

imp jerry/jerry file=tom.dmp log=jerry_imp.log fromuser=tom touser=jerry
导入日志：
. importing TOM's objects into JERRY
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"          0 rows imported
Import terminated successfully without warnings.

可以看到将参数deferred_segment_creation修改为false导入也正常，但是这只适用于新建的分区表，对于已经存在的分区表，依然会导入失败。处理办法看下面第6条。

6. 接下来回答上面第3和5步中的问题

如果想用exp，imp进行导出导入，导出的时候又必须加direct=true，而且导出的表中包含分区表，并且该分区表中存在分区没有段的情况。那怎么办？
光是将参数deferred_segment_creation修改为false不够，因为这只影响新建的表，要想对老的表也生效，可以采取下面的办法。

6.1. 将参数deferred_segment_creation修改为false
SQL> alter system set deferred_segment_creation=false;

6.2. 使用exp对分区表进行导出(只有那些分区表中存在分区没有分配段的才需要导出)，注意不要加direct=true
exp tom/tom file=tom.dmp log=tom_exp.log tables=t_par

6.3. 删除该分区表
SQL> drop table tom.t_par;

6.4. 使用imp对其进行导入
imp tom/tom file=tom.dmp log=tom_imp.log full=y

导入日志
. importing TOM's objects into TOM
. . importing partition                  "T_PAR":"P01"          1 rows imported
. . importing partition                  "T_PAR":"P02"          0 rows imported
Import terminated successfully without warnings.

导入后查看段的情况

SQL> select owner,segment_name,partition_name,segment_type from dba_segments where owner='TOM';

OWNER      SEGMENT_NAME         PARTITION_NAME                 SEGMENT_TYPE
---------- -------------------- ------------------------------ ------------------
TOM        T_PAR                P02                            TABLE PARTITION
TOM        T_PAR                P01                            TABLE PARTITION

可以看到现在即使P02分区中没有行，也分配了段。这是由于我先前已经将参数deferred_segment_creation设置成了false，并且删除了表，imp在执行过程中，会先创建表然后插入数据，在创建表时，每个分区都会分配段。也就是说只需要解决老的分区表中段没有分配的情况，后面就不会碰到IMP-00009。

五、总结

只有在分区表中存在分区没有分配段，而且在导出时使用了direct=true参数，这两种情况在一起才会造成我这个IMP-00009这个错误。对于其它的普通表，不管有没有分配段，是否使用direct=true都不会造成这个错误。

我在分析IMP-00009这个问题的时候，首先日志纪录只有一行，就写"IMP-00009: abnormal end of export file"，第一时间去查导出的日志，"Export terminated successfully without warnings."，导出的日志没有显示任何异常。这就把我整懵逼了。然后我开始求助于万能的互联网，查了一圈下来，没有找到任何解决方案，其实不是大牛不解答，而是问问题的人提供的信息太少了，你就提供个错误日志，比方说我这次碰到的问题，假设你只给个错误日志，大牛打死也复现不出来问题，那就谈不上去解决问题了。而往往当我们把整个问题都描述清楚了，问题大概率就迎刃而解了。

文章中涉及到的相关信息备注：
deferred_segment_creation：延迟段创建，上面已经通过实验介绍的很清楚了。
direct=true：导出数据时不经过buffer cache，这个参数是个天坑，bug极多，导出时尽量不要用。