大数据量导出excel问题
背景:使用XSSFWorkbook导出程序报OutOfMemoryError:Javaheap space;内存溢出错误。
解决方法:使用SXSSFWorkbook类进行导出
SXSSFWorkbook-来至官方的解释:实现“BigGridDemo”策略的流式XSSFWorkbook版本。这允许写入非常大的文件而不会耗尽内存,因为任何时候只有可配置的行部分被保存在内存中。您可以提供用作书面数据基础的模板工作簿。有关详细信息,请参见https://poi.apache.org/spreadsheet/how-to.html#sxssf。请注意,仍然可能会消耗大量内存,这些内存基于您正在使用的功能,例如合并区域,注释…仍然只存储在内存中,因此如果广泛使用,可能需要大量内存。SXSSFWorkbook默认使用内联字符串而不是共享字符串表。这非常有效,因为没有文档内容需要保存在内存中,但也被称为制作与某些客户不兼容的文档。在启用共享字符串的情况下,文档中的所有唯一字符串必须保存在内存中。根据您的文档内容,这可能比共享字符串被禁用时使用更多的资源。在决定是否启用共享字符串之前,请仔细检查您的内存预算和兼容性需求。
原文链接:https://blog.youkuaiyun.com/YiWangJiuShiXingFu/java/article/details/80258148
代码
XSSFWorkbook xwb = new XSSFWorkbook(in);
Workbook wb = new SXSSFWorkbook(xwb, 1000);
问题:使用此类会有临时文件生成,若临时文件过多会对磁盘造成压力。
- window系统在C:\Users\用户名\AppData\Local\Temp\poifiles\poi-sxssf-template***.xlsx文件
- linux系统在/var/tmp/poifiles/poi-sxssf-template***.xlsx文件。
为什么是这两个目录?如何更改目录?
查看源码:
SXSSFWorkbook.write
DefaultTempFileCreationStrategy.createPOIFilesDirectory
可以看出是根据启动时java系统属性路径生成,所以更改路径有两种方法:
- 启动时添加-Djava.io.tmpdir= “你需要更改的路径”
- 启动后更改路径System.setProperty(“java.io.tmpdir”, “你需要更改的路径”);
可按照实际情况确定是否删除