本周用ETL工具进行一系列数据入库操作,涉及到一些上几十G的大表的时候,总是会出现异常:Errcode: 28 - No space left on device。
[load data local infile '/data1/netl/out/7644/cm_port_gz.csv' into table cm_port_gz character set gbk fields terminated by ',' enclosed by '"'lines terminated by '\n' ignore 1 lines]; SQL state [HY000]; error code [3]; Error writing file '/tmp/MLrbcWU9' (Errcode: 28 - No space left on device)
刚开始的时候,还以为是机器上面磁盘的存储空间不足,查看了一下机器的磁盘使用情况 。
还有200多G的磁盘空间,导入一张几十G的表,理论上是没什么问题的。很明显问题不是因为磁盘存储空间不足导致的。因为数据导入完成之后,还有一个创建索引的步骤。后面再分析了一下创建索引的过程 。
MySQL 在给一张表建索引的时候 ,会有一个复制数据到临时表的一个操作。再看了 一下MySQL的配置,没有指定临时空间,MySQL默认使用了根目录下面的空间作为临时 空间。