C# NPOI大数据量导出多个sheet的Excel

NPOI早期版本导出Excel版本是 2003 excel,一个sheet最多存储65536条记录,超过报错,后期版本可以导出2007 excel,但为了兼容2003,一般我们选择导出2003 excel。解决办法是将数据分多个sheet导出,以下为核心代码。

我这里用的是NPOI_1.2.4.0,大家可以去网上下载。

        using NPOI.SS.UserModel;
        using NPOI.HSSF.UserModel;

        /// <summary>
        /// DataTable转换成Excel文档流
        /// </summary>
        /// <param name="table"></param>
        /// <returns></returns>
        public static MemoryStream DataTableToExcelStream(DataTable table)
        {
            MemoryStream ms = new MemoryStream();

            using (table)
            {

                using (IWorkbook workbook = new HSSFWorkbook()) //HSSFWorkbook
                {

                    // handling value.
                    int rowIndex = 1;

                    ISheet sheet=null;
                    IRow headerRow=null;
                    int sheetCount = 0;
                    int sheetRowCount = 65536;
在使用 C#NPOI导出多个 Excel 文件时,如果遇到内存溢出问题,可以尝试以下几种解决方案来优化内存使用并避免内存溢出: ### 使用 `FileStream` 直接写入磁盘 避免将整个 Excel 文件内容存储在内存中。可以使用 `FileStream` 直接将数据写入磁盘文件,而不是先将数据存储在 `MemoryStream` 中。 ```csharp public static void DataTableToExcel(DataTable dtSource, string strHeaderText, string strFileName) { using (FileStream fs = new FileStream(strFileName, FileMode.Create, FileAccess.Write)) { IWorkbook workbook = new XSSFWorkbook(); ISheet sheet = workbook.CreateSheet("Sheet1"); // 创建表头 IRow headerRow = sheet.CreateRow(0); foreach (DataColumn column in dtSource.Columns) { ICell cell = headerRow.CreateCell(column.Ordinal); cell.SetCellValue(column.Caption ?? column.ColumnName); } // 写入数据 int rowIndex = 1; foreach (DataRow row in dtSource.Rows) { IRow dataRow = sheet.CreateRow(rowIndex++); foreach (DataColumn column in dtSource.Columns) { ICell cell = dataRow.CreateCell(column.Ordinal); cell.SetCellValue(row[column].ToString()); } } workbook.Write(fs); } } ``` ### 分批次处理数据 如果数据量非常大,可以考虑分批次处理数据。每次处理一部分数据并将其写入文件,然后释放这部分数据占用的内存。 ```csharp public static void BatchDataTableToExcel(DataTable dtSource, string strHeaderText, string strFileName, int batchSize) { using (FileStream fs = new FileStream(strFileName, FileMode.Create, FileAccess.Write)) { IWorkbook workbook = new XSSFWorkbook(); ISheet sheet = workbook.CreateSheet("Sheet1"); // 创建表头 IRow headerRow = sheet.CreateRow(0); foreach (DataColumn column in dtSource.Columns) { ICell cell = headerRow.CreateCell(column.Ordinal); cell.SetCellValue(column.Caption ?? column.ColumnName); } // 分批次处理数据 int rowIndex = 1; for (int i = 0; i < dtSource.Rows.Count; i += batchSize) { int end = Math.Min(i + batchSize, dtSource.Rows.Count); for (int j = i; j < end; j++) { DataRow row = dtSource.Rows[j]; IRow dataRow = sheet.CreateRow(rowIndex++); foreach (DataColumn column in dtSource.Columns) { ICell cell = dataRow.CreateCell(column.Ordinal); cell.SetCellValue(row[column].ToString()); } } // 清除部分数据以释放内存 GC.Collect(); GC.WaitForPendingFinalizers(); } workbook.Write(fs); } } ``` ### 优化内存管理 确保在使用完对象后及时释放资源,可以手动调用垃圾回收器来释放内存。 ```csharp // 在适当的地方调用垃圾回收 GC.Collect(); GC.WaitForPendingFinalizers(); ``` ### 使用 `using` 语句确保资源释放 确保在使用完 `MemoryStream` 或 `FileStream` 后及时释放资源。 ```csharp using (FileStream fs = new FileStream(strFileName, FileMode.Create, FileAccess.Write)) { // 操作文件 } ``` ### 避免创建过多对象 尽量复用对象,减少频繁创建和销毁对象带来的内存开销。 ### 使用更高效的库 如果 NPOI 的性能无法满足需求,可以考虑使用其他更高效的库,如 `ClosedXML` 或 `ExcelPackage`。 ### 参考资料 - [NPOI 导出列太多或者数据太多爆内存](https://example.com/npoi-memory-issue) [^1] - [C# 操作 NPOI 导出 Excel](https://example.com/npoi-export) [^2]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值