POI处理大数据导入导出

最新推荐文章于 2025-06-25 09:58:52 发布

原创

最新推荐文章于 2025-06-25 09:58:52 发布 · 1.2w 阅读

53 ·

CC 4.0 BY-SA版权

文章标签：

#POI #Excel #大量数据导入

Java POI处理大量数据导入导出

xls和xlsx
导入数据（大量）
导出数据（大量）
总结

xls和xlsx

xls是旧版Excel格式文件，xlsx是新版Excel格式文件；而xlsx新版格式其实是一系列文件压缩包，
如图：
xls是以二进制的方式存储，这种格式不易被其他软件读取使用；而xlsx采用了基于XML的ooxml开放文档标准，ooxml使用XML和ZIP技术结合进行文件存储，XML是一个基于文本的格式，而且ZIP容器支持内容的压缩，所以其一大优势是可以大大减小文件的尺寸；
使用POI来读写Excel文件有两种方式，一种用户模式（UserModel）,读取时消耗大量内存，造成OOM问题；一种事件模式（SAX模式），仅仅关注文件内部数据，内存消耗很低；
导出文件同样如此，使用Workbook普通导出，数据量小的时候可以正常使用，但时间等待仍然很长，这时推荐使用POI提供的SXXFWorkbook处理，其使用时间窗口原理（具体可以查询）限制访问，刷出内存，降低内存消耗，提升效率。
另外还需要注意，根据你使用的功能，仍然可能消耗大量内存，例如合并区域，超链接，注释……，这些内容只存储在内存中。

导入数据（大量）

大量数据导入在网络上搜寻到的相关代码大部分通过集成POI原生的DefaultHandler重写其startElement, endElement, characters方法进行相关的解析，而POI已经将相关逻辑封装在XSSFSheetXMLHandler，只要实现暴露的接口SheetContentsHandler即可。
使用SheetContentsHandler的例子可以参考官方的XLSX2CVS。
本例实现该接口：

package cn.skio.venus.api;

import org.apache.poi.openxml4j.opc.OPCPackage;
import org.apache.poi.util.SAXHelper;
import org.apache.poi.xssf.eventusermodel.ReadOnlySharedStringsTable;
import org.apache.poi.xssf.eventusermodel.XSSFReader;
import org.apache.poi.xssf.eventusermodel.XSSFSheetXMLHandler;
import org.apache.poi.xssf.eventusermodel.XSSFSheetXMLHandler.SheetContentsHandler;
import org.apache.poi.xssf.model.StylesTable;
import org.apache.poi.xssf.usermodel.XSSFCom