文章目录
前言
JAVA解析Excel工具EasyExcel的初次使用
easyExcel git地址:https://github.com/alibaba/easyexcel
一、EasyExcel
Java解析、生成Excel比较有名的框架有Apache poi、jxl。但他们都存在一个严重的问题就是非常的耗内存,poi有一套SAX模式的API可以一定程度的解决一些内存溢出的问题,但POI还是有一些缺陷,比如07版Excel解压缩以及解压后存储都是在内存中完成的,内存消耗依然很大。easyexcel重写了poi对07版Excel的解析,一个3M的excel用POI sax解析依然需要100M左右内存,改用easyexcel可以降低到几M,并且再大的excel也不会出现内存溢出;03版依赖POI的sax模式,在上层做了模型转换的封装,让使用者更加简单方便
二、背景及解决
本公司一个相对时间较长的一个SpringBoot项目,系统原有导入Excel偶尔会发生OOM,原有导入功能对导入excel大小限制进行规避。
业务新需求中,涉及到了excel的导入,趁此机会使用easyExcel,为调整原有导入发生OOM做好准备。
由于原项目中使用的POI版本未3.16,此次升级POI 3.17(不升级easyExcel异常)
升级方法调整借鉴:https://www.youkuaiyun.com/tags/OtDacg4sNzM2NTUtYmxvZwO0O0OO0O0O.html
主要问题
系统使用人员将excel导入后,需要立即知道结果;若数据落库过程中出现了异常,使用人员需要通过系统反馈进行excel内容调整后再次操作。
但是重写easyExcel是未对异常进行处理的, 同时本次导入Excel及其简单且每次导入数据量有限,所以将excel中所有的数据取出后,统一验证,若有问题再进行抛出。
导入excel校验返回
代码如下:
public Map importData(@RequestParam(value = "filename") MultipartFile file) {
ExcelReader excelReader = null;
List<InteractiveUploadDto> deleteList = new ArrayList<>();
List<InteractiveUploadDto> addList = new ArrayList<>();
// 数据读取异常统一抛出
try {
excelReader = EasyExcelFactory.read(file.getInputStream(), InteractiveUploadDto.class,
new InteractiveUploadListener( deleteList,addList))<