MySQL导入几十G数据后创建索引时提示空间不足(Errcode: 28 - No space left on device)

本周用ETL工具进行一系列数据入库操作,涉及到一些上几十G的大表的时候,总是会出现异常:Errcode: 28 - No space left on device。

[load data local infile '/data1/netl/out/7644/cm_port_gz.csv' into table cm_port_gz character set gbk fields terminated by ',' enclosed by '"'lines terminated by '\n' ignore 1 lines]; SQL state [HY000]; error code [3]; Error writing file '/tmp/MLrbcWU9' (Errcode: 28 - No space left on device)

刚开始的时候,还以为是机器上面磁盘的存储空间不足,查看了一下机器的磁盘使用情况 。

MySQL导入几十G数据后创建索引时提示空间不足(Errcode: 28 - No space left on device)_第1张图片


还有200多G的磁盘空间,导入一张几十G的表,理论上是没什么问题的。很明显问题不是因为磁盘存储空间不足导致的。因为数据导入完成之后,还有一个创建索引的步骤。后面再分析了一下创建索引的过程 。

MySQL导入几十G数据后创建索引时提示空间不足(Errcode: 28 - No space left on device)_第2张图片

MySQL 在给一张表建索引的时候 ,会有一个复制数据到临时表的一个操作。再看了 一下MySQL的配置,没有指定临时空间,MySQL默认使用了根目录下面的空间作为临时 空间。


到这里,似乎所有问题都已经找到答案了,马上对比一下临时空间的大小以及导入的数据文件大小。


数据文件有41G之多


但是根目录下能作为临时空间的只有39G,明显是放不下41G数据的。


所以,结果是清理了MySQL作为临时空间的挂载点(或者修改my.conf配置文件,指向另一个更大存储空间的挂载点,这个需要重启MySQL),这样数据就可以导入 后正常创建索引了。

你可能感兴趣的:(MySQL二三事,空间不足,No,space,left,on,device,创建索引error)