POI3.8中 大数据量的处理

最新推荐文章于 2021-06-29 15:04:15 发布
最新推荐文章于 2021-06-29 15:04:15 发布
阅读量355 收藏
点赞数
分类专栏： 数据库 文章标签： 大数据 数据库 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/chengyue2007/article/details/84772027
版权

package cn.cy.codeTest;

 

import java.io.FileOutputStream;

 

import org.apache.poi.ss.usermodel.Cell;

import org.apache.poi.ss.usermodel.Row;

import org.apache.poi.ss.usermodel.Sheet;

import org.apache.poi.ss.usermodel.Workbook;

import org.apache.poi.ss.util.CellReference;

import org.apache.poi.xssf.streaming.SXSSFWorkbook;

 

public class XlsMergeUtil {

public static void main(String[] args) throws Throwable {

Workbook wb = new SXSSFWorkbook(100); // keep 100 rows in memory,

// exceeding rows will be

// flushed to disk

Sheet sh = wb.createSheet();

for (int rownum = 0; rownum < 100000; rownum++) {

Row row = sh.createRow(rownum);

for (int cellnum = 0; cellnum < 10; cellnum++) {

Cell cell = row.createCell(cellnum);

String address = new CellReference(cell).formatAsString();

cell.setCellValue(address+":"+rownum);

}

}

FileOutputStream out = new FileOutputStream("c:/sxssf.xlsx");

wb.write(out);

out.close();

}

}

 

package cn.cy.codeTest;

import java.io.FileOutputStream;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Statement;

import org.apache.poi.ss.usermodel.Cell;
import org.apache.poi.ss.usermodel.Row;
import org.apache.poi.ss.usermodel.Sheet;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.xssf.streaming.SXSSFWorkbook;
import org.apache.poi.xssf.usermodel.XSSFCell;
import org.apache.poi.xssf.usermodel.XSSFRow;
import org.apache.poi.xssf.usermodel.XSSFSheet;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;

public class OracleExpertExcel_new {

	@SuppressWarnings("resource")
	public static void main(String[] args) throws Exception {
		// TODO Auto-generated method stub

	    
		
		Workbook wb = new SXSSFWorkbook(1000);
 
		Sheet xssfsheet = wb.createSheet();
		Connection ct = null;
		Statement ps = null;
		ResultSet rs = null;
		 
	   String sql="SELECT dis.* FROM AR_DISTRIBUTIONS_ALL dis, \n" + 
	     "AR_CASH_RECEIPT_HISTORY_ALL crh \n" + 
	     "WHERE crh.cash_receipt_id = 590065 \n" + 
	     "AND dis.source_table = 'CRH' \n" + 
	     "AND dis.source_id = crh.cash_receipt_history_id \n" + 
	     "UNION SELECT dis.* FROM AR_DISTRIBUTIONS_ALL dis, AR_RECEIVABLE_APPLICATIONS_ALL app \n" + 
	     "WHERE app.cash_receipt_id = 590065 \n" + 
	     "AND dis.source_table = 'RA' \n" + 
	     "AND dis.source_id = app.receivable_application_id \n" + 
	     "ORDER BY 3"; 
		
		//String sql="  SELECT dis.* FROM AR_DISTRIBUTIONS_ALL dis where dis.line_id=1860";
		int i = 0;

		try {
			Class.forName("oracle.jdbc.driver.OracleDriver");
			String conn="jdbc:oracle:thin:@192.168.XX.XX:1529:UAT";
			ct = DriverManager.getConnection(conn, "apps", "XX");
			ps = ct.createStatement();
			rs = ps.executeQuery(sql);
			while (rs.next()) {
				 
				Row xssfrow = xssfsheet.createRow(i);
				
				Cell cell0 = xssfrow.createCell(0); 
				cell0.setCellValue(rs.getString(1));

				Cell cell1 = xssfrow.createCell(1); 
				cell1.setCellValue(rs.getString(2));

				Cell cell2 = xssfrow.createCell(2); 
				cell2.setCellValue(rs.getString(3));

				Cell cell3 = xssfrow.createCell(3); 
				cell3.setCellValue(rs.getString(4));

				Cell cell4 = xssfrow.createCell(4); 
				cell4.setCellValue(rs.getString(5));

				Cell cell5 = xssfrow.createCell(5); 
				cell5.setCellValue(rs.getString(6));

				Cell cell6 = xssfrow.createCell(6); 
				cell6.setCellValue(rs.getString(7));

				Cell cell7 = xssfrow.createCell(7); 
				cell7.setCellValue(rs.getString(8));

				Cell cell8 = xssfrow.createCell(8); 
				cell8.setCellValue(rs.getString(9));

				Cell cell9 = xssfrow.createCell(9); 
				cell9.setCellValue(rs.getString(10));

				Cell cell10 = xssfrow.createCell(10); 
				cell10.setCellValue(rs.getString(11));

				Cell cell11 = xssfrow.createCell(11); 
				cell11.setCellValue(rs.getString(12));

				Cell cell12 = xssfrow.createCell(12); 
				cell12.setCellValue(rs.getString(13));

				Cell cell13 = xssfrow.createCell(13); 
				cell13.setCellValue(rs.getString(14));

				Cell cell14 = xssfrow.createCell(14); 
				cell14.setCellValue(rs.getString(15));

				Cell cell15 = xssfrow.createCell(15); 
				cell15.setCellValue(rs.getString(16));

				Cell cell16 = xssfrow.createCell(16); 
				cell16.setCellValue(rs.getString(17));

				Cell cell17 = xssfrow.createCell(17); 
				cell17.setCellValue(rs.getString(18));

				Cell cell18 = xssfrow.createCell(18); 
				cell18.setCellValue(rs.getString(19));

				Cell cell19 = xssfrow.createCell(19); 
				cell19.setCellValue(rs.getString(20));

				Cell cell20 = xssfrow.createCell(20); 
				cell20.setCellValue(rs.getString(21));

				Cell cell21 = xssfrow.createCell(21); 
				cell21.setCellValue(rs.getString(22));

				Cell cell22 = xssfrow.createCell(22); 
				cell22.setCellValue(rs.getString(23));

				Cell cell23 = xssfrow.createCell(23); 
				cell23.setCellValue(rs.getString(24));

				Cell cell24 = xssfrow.createCell(24); 
				cell24.setCellValue(rs.getString(25));

				Cell cell25 = xssfrow.createCell(25); 
				cell25.setCellValue(rs.getString(26));

				Cell cell26 = xssfrow.createCell(26); 
				cell26.setCellValue(rs.getString(27));

				Cell cell27 = xssfrow.createCell(27); 
				cell27.setCellValue(rs.getString(28));

				Cell cell28 = xssfrow.createCell(28); 
				cell28.setCellValue(rs.getString(29));

				Cell cell29 = xssfrow.createCell(29); 
				cell29.setCellValue(rs.getString(30));

				Cell cell30 = xssfrow.createCell(30); 
				cell30.setCellValue(rs.getString(31));

				Cell cell31 = xssfrow.createCell(31); 
				cell31.setCellValue(rs.getString(32));

				Cell cell32 = xssfrow.createCell(32); 
				cell32.setCellValue(rs.getString(33));

				Cell cell33 = xssfrow.createCell(33); 
				cell33.setCellValue(rs.getString(34));

				Cell cell34 = xssfrow.createCell(34); 
				cell34.setCellValue(rs.getString(35));

				Cell cell35 = xssfrow.createCell(35); 
				cell35.setCellValue(rs.getString(36));

				Cell cell36 = xssfrow.createCell(36); 
				cell36.setCellValue(rs.getString(37));

				Cell cell37 = xssfrow.createCell(37); 
				cell37.setCellValue(rs.getString(38));

				Cell cell38 = xssfrow.createCell(38); 
				cell38.setCellValue(rs.getString(39));

				Cell cell39 = xssfrow.createCell(39); 
				cell39.setCellValue(rs.getString(40));

				Cell cell40 = xssfrow.createCell(40); 
				cell40.setCellValue(rs.getString(41));

				Cell cell41 = xssfrow.createCell(41); 
				cell41.setCellValue(rs.getString(42));

				Cell cell42 = xssfrow.createCell(42); 
				cell42.setCellValue(rs.getString(43));

				Cell cell43 = xssfrow.createCell(43); 
				cell43.setCellValue(rs.getString(44)+"44");

 
				i++;

			}
			System.out.println("i="+i);

		} catch (Exception e) {
			e.printStackTrace();
			// TODO: handle exception
		} finally {

			try {
				if (rs != null) {
					rs.close();
				}
				if (ps != null) {
					ps.close();
				}
				if (ct != null) {
					ct.close();
				}
			} catch (SQLException e) {
				// TODO Auto-generated catch block
				e.printStackTrace();
			}
		}

	 
	    FileOutputStream out = new FileOutputStream("c:/sxssf.xlsx");
		wb.write(out);
		out.close();
		 
		System.out.println("导出成功");
		
	
	}

}

 

POI3.8 导出大数据excel
习惯有你&的博客
10-17 2440
今天项目需要导出站点对应的频道展示，导出时使用的poi3.8中的HSSFWorkbook workBook =new HSSFWorkbook()；来创建workBook，但是在循环样式的时候，会报java.lang.IllegalStateException: The maximum number of cell styles was exceeded. You can define up to
Excel操作工具poi3.8
07-24
Java读取excel的工具,poi3.8版本，下载后lib下的三个jar包不要忘了必须导入，否则调用报错
poi 数字处理
百八十个
10-17 409
问题:excel导入的数字都是333.0的形式，且数字比较大时转换成了科学计数法形式。 代码： [code="java"]String str = row.getCell(0).toString();[/code] 发现上面是先将字符串转成了数字又转成了字符串 改为： [code="java"] Cell cell=row.getCell(0); cell.setCe...
poi3.8
09-30 594
poi excel2007错误 org.apache.poi.POIXMLException: java.lang.reflect.InvocationTargetException xbean-spring-2.8.jar,这个是依赖的包 xmlbeans-2.3.0
POI3.8中 大数据量的excel表格处理
09-27 2627
POI之前的版本不支持大数据量处理，如果数据过多则经常报OOM错误，有时候调整JVM大小效果也不是太好。3.8版本的POI新出来了SXSSFWorkbook,可以支持大数据量的操作。 3.8版本的POI对excel的导出操作，一般只使用HSSFWorkbook以及SXSSFWorkbook，HSSFWorkbook用来处理较少的数据量，SXSSFWorkbook用来处理大数据量以及超大数据量的导
POI3.8中 大数据量的处理.pdf
11-03
总之，Apache POI 3.8 中的SXSSFWorkbook是处理大数据量Excel文件的理想选择，它通过流式处理和磁盘缓存策略，有效地解决了内存限制问题，确保了大规模数据处理的可行性。在互联网和计算机科学（cs）领域，这样的...
POI3.8中 大数据量的处理.docx
11-03
。。。
POI 3.8 Beta5 创建大数据量 Excel文件
04-01
在POI 3.8 Beta5这个版本中，开发者可以利用它来处理大数据量的Excel文件，这在数据处理、报告生成或数据分析场景中非常有用。 Apache POI库提供了HSSF（Horrible Spreadsheet Format）和XSSF（XML Spreadsheet ...
poi 3.8和4.1.2.rar
07-10
可以通过调整工作簿的缓存策略，以及使用SXSSF（Streaming Usermodel API）来处理大数据量的情况。 版本间的差异： - Apache POI 3.8是较早的版本，可能不支持一些新特性，如XSSF对Excel 2007以上版本的支持和对新...
poi3.8版本jar包及解析Excel对应Java代码
08-13
在本主题中，我们将重点讨论POI 3.8版本，它支持对Excel电子表格的读取和写入操作。 首先，要使用Apache POI 3.8，你需要下载相应的jar包，即`poi-3.8.jar`。这个jar包包含了处理Excel文件所需的类和方法。在Java...
poi 3.8 版本全量包
09-13
poi全量包，可以直接使用，导出和导入Excle文件，java操作的例子网上都有
POI 3.8 jar包
02-23
阿帕奇POI-3.8 jar包 可用于解析doc文档。
poi3.8jar包
04-27
poi3.8的jar包，支持word的导出。Ecxexl的读取和导出！！！！
poi-3.8 jar
09-27
poi 需要用到的jar
poi-3.8组件
01-30
poi的组件，用于解析office文档，全部的组建放在里面，包含支持包，在对应文件夹里
POI3.8解析XLS和XLSX文件（大量单元格带格式空格导致内存溢出）
ghjzzhg的博客
06-29 561
在java项目中解析Microsoft的office系列软件，都会用到Apache的poi包，从office2007开始office系列的文件后缀名发生了改变，所以原来低版本的poi并不支持office2007以后的文件解析。好像是从poi3.5以后才支持了2007版本的解析。如果项目中的poi版本太旧可以在http://poi.apache.org/download.html下载新版本的poi。 POI使用HSSFWorkbook解析XLS（2003版本）文件，使用XSSF...
使用poi导出大数据量excel
01-22
Java实现大数据量导出时，如果使用普通的POI导出会出现内存溢出等情况，该方法解决了此问题，项目中使用该方法导出67000条数据需要21秒，数万条数据导出，本人认为效率还算可以，推荐给大家
poi-3.8修改源码、编译、打包过程
leys123的专栏
06-05 1855
1.网上找到poi-3.8的源码文件 2.在eclipse中新建一个java 工程Test 3.把源码中poi-3.8\src\java下的所有文件拷贝到新建工程Test的src下 4.刷新Test项目，这是可以看到项目报错，是因为缺少依赖包，commons-codec-1.8.jar和commons-logging-1.0.4.jar，    将这两jar包拷贝到Test项目中，然后 点
java 读excle poi3.8_POI 3.8读取2003与2007格式EXCEL（xls、xlsx）
weixin_30000523的博客
02-28 306
废话少说直接上代码，记得是poi3.8版本啊。方法入口唯一，自动判断格式，使用接口引用，自动选择执行方法。方法入口：public static ArrayList explanExcelToList(String fileName) {ArrayList list = new ArrayList();Workbook wb = null;try {wb = get2003Workbook(new ...
使用POI 3.8 Beta5高效处理大数据量Excel文件
POI 3.8 Beta5 版本是该工具库的一个更新版本，它可能包含了一些改进和新功能，特别加强了处理大数据量Excel文件的能力。在处理大数据量的Excel文件时，常见的问题包括内存溢出、效率低下等，而POI的更新版本往往会...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值