PreparedStatement 查询大容量数据内存溢出解决

最新推荐文章于 2024-06-11 09:30:00 发布

最新推荐文章于 2024-06-11 09:30:00 发布 · 1k 阅读

文章标签：

#大数据 #移动开发

本文介绍了一种在使用PreparedStatement查询大量数据时避免内存溢出的方法：通过设置ResultSet的类型为TYPE_SCROLL_INSENSITIVE及并发模式为CONCUR_READ_ONLY。

PreparedStatement ps = con.prepareStatement(sql,
ResultSet.TYPE_SCROLL_INSENSITIVE, ResultSet.CONCUR_READ_ONLY);

ResultSet rs = ps.executeQuery();

在使用PreparedStatement 查询大容量数据时内存溢出,只需在prepareStatement方法中加上ResultSet.TYPE_SCROLL_INSENSITIVE, ResultSet.CONCUR_READ_ONLY即可

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

iteye_8029

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Mybatis PageHelper实现分页——让查询结果分页更简单

AI天才研究院

07-28

1748

2019年下半年，数据量越来越大、应用场景越来越复杂，传统的分页方式已经无法满足用户的需求。基于此背景，开源社区提出了各种分页方案，其中Mybatis-PageHelper占据了很大的市场份额，被广泛使用在Java世界的ORM框架中。本篇文章将带领读者了解到Mybatis-PageHelper分页插件的工作原理及其实现方法，让大家能够更加轻松地解决分页问题，提升效率，降低成本。

学习记录296@PreparedStatement批处理中堆内存溢出

教练我想学编程

07-19

1164

代码，向学生表中添加数据： package mypackage; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; //测试 public class MyJava { public static void main(String[] args) throws ClassNotFoundExcep

参与评论您还未登录，请先登录后发表或查看评论

T4CPreparedStatement内存溢出

tszxlzc的专栏

10-21

1909

oracle 批量插入数据时，运行一段时间就会报内存溢出 dump 内存之后发现T4CPreparedStatement 占用了83%的内存，并且老年代gc 没有生效，所以确定是T4CPreparedStatement对象导致内存溢出了 4,464 instances of "oracle.jdbc.driver.T4CPreparedStatement", loaded by "sun.misc.Launcher$AppClassLoader @ 0x6c0024168" occupy 3,215,8

jmap命令(Java Memory Map) - 51CTO.COM

weixin_34252686的博客

09-14

227

jmap命令(Java Memory Map) - 51CTO.COMjmap命令(Java Memory Map)2012-03-02 13:52 fenglibing fenglibing的博客我要评论(0) 字号：T | Tjmap命令：打印出某个java进程（使用pid）内存内的，所有‘对象’的情况（如：产生那些对象，及其数量）。 AD：51CTO云计算架构师峰会抢票进行中！ 1...

jdbc statement.executeQuery(sql) 造成内存溢出的解决方法

ChasingdreamLY的博客

08-17

4341

如果你要读取一个超大的表，使用下面的语句有可能会造成内存溢出： Statement statement = conn.createStatement( ResultSet.TYPE_FORWARD_ONLY, ResultSet.CONCUR_READ_ONLY); ResultSet rs = statement.executeQuery(sql); ...

PreparedStatem: 数据大小超出此类型的最大值

IT忍者神龟

06-22

1798

一、异常情况：有了一定Java编程经验之后，一般都使用PreparedStatement代替Statement。但实际开发中对数据库进行操作时，字段遇到大数据并且该字段为非BLOB,CLOB的类型时，若采用PreparedStatement方法setString方法时会如下异常： java.sql.SQLException: 数据大小超出此类型的最大值实际数据库

java 程序会因为数据库连接问题导致内存溢出吗

最新发布

04-29

好的，我现在需要帮助用户解决Java程序中因数据库连接问题导致内存溢出的原因和解决方案。首先，我需要回忆一下用户提供的引用内容，特别是引用[2]和[4]，其中提到了内存溢出的不同类型和数据库连接池耗尽的情况。 ...

避免Tomcat内存溢出的终极指南：数据库连接池内存管理实战

本文探讨了内存溢出的概念、影响、成因以及预防措施，并深入分析了Tomcat服务器内存管理和数据库连接池的配置与优化。文章从内存结构解析、内存监控工具的使用、到内存溢出的预防策略进行了详细的阐述，并结合实际...

Spring Boot 处理百万级别数据量解决方案

八戒的博客

06-11

2165

1. 分页与流式处理：通过分页查询避免一次性加载大量数据至内存，采用流式API逐条处理数据，比如JPA分页查询或JDBC ResultSet流式处理。2. 响应式编程与流式下载：在处理大数据导出时，使用`StreamingResponseBody`实现服务端流式响应，实时生成和发送数据给客户端，降低内存占用。

ConnectUtility内存溢出追踪实录：JVM调优+对象生命周期管理的完整路径（案例驱动）

本文围绕Java应用中典型的内存溢出问题，结合ConnectUtility案例系统性地还原了故障现场并开展深度诊断。基于JVM内存模型与对象生命周期理论，剖析了堆、栈、方法区的结构职责及对象分配与回收机制，明确了...

druid导致oracle内存溢出,druid – Oracle数据库下PreparedStatementCache内存问题解决方案...

weixin_39688750的博客

04-03

1047

Oracle支持游标，一个PreparedStatement对应服务器一个游标，如果PreparedStatement被缓存起来重复执行，PreparedStatement没有被关闭，服务器端的游标就不会被关闭，性能提高非常显著。在类似SELECT * FROM T WHERE ID = ?这样的场景，性能可能是一个数量级的提升。由于PreparedStatementCache性能提升明显，Dr...

mysql prepareStatement executeQuery() 内存溢出的解决办法

wangts的专栏

04-08

4264

1. PreparedStatement ps = con.prepareStatement（"select * from myTableName", ResultSet.TYPE_FORWARD_ONLY, ResultSet.CONCUR_READ_ONLY）; 2. //ps.setFetchSize

Oracle异常之大数据类型

猪就应该打盹

10-23

166

今天在进行oracle开发的时候遇到了一个异常，在baidu一通没有结果后，进行了google尝试，最终挖掘出了答案，哈哈。异常： java.sql.SQLException: 数据大小超出此类型的最大值: 2017 在将过长的字符串写入数据库中时，不能直接使用setString()方法，而应该使用“流”方式写入，如下： CharArrayReader reader = ...

java PreparedStatement需要关闭，不然会内存溢出

ghostgant的专栏

11-21

8608

第三方的数据库连接池，使用的时候，获取到Connection之后，使用完成，调用的关闭方法（close()），并没有将Connection关闭，只是放回到连接池中，如果调用的这个方法，而没有手动关闭PreparedStatement等，则这个PreparedStatement并没有关闭，这样会使得开发的程序内存急速增长，java的内存回收机制可能跟不上速度，最终造成Out of memory E

executeQuery() 内存溢出的解决办法

zhglhy的专栏

04-13

637

内存溢出 OOM

PreparedStatement超过最大游标数

weixin_30502965的博客

09-02

700

调用他人代码时，在jdbc操作时报错：超过最大游标数查看代码，在while循环里调用了一个方法，方法中有对数据库的操作和数据的逻辑操作，因此不能把close等放到循环外面，方法中调用的方法也都进行了close， debug后发现，方法中调用的方法的close在return操作之后，相当于没有走这一步，改代码放到finally块中就好了转载于:https://www.cn...

java.sql.SQLException: 数据大小超出此类型的最大值，问题解决办法

chengwa9834的博客

01-21

888

有了一定Java编程经验之后，一般都使用PreparedStatement代替Statement。但实际开发中对数据库进行操作时，字段遇到大数据并且该字段为非BLOB,CLOB的类型时，若采用PreparedStatement方法setString方法时会如下异常： java....

mysql jdbc内存溢出_如何避免JDBC内存溢出问题

weixin_39653448的博客

01-27

692

Mysql：方法一：在连接mysql的URL后加两个参数：useCursorFetch=true&defaultFetchSize=100完整形式如：jdbc:mysql://127.0.0.1:3306/aeolusdb?useUnicode=true&charsetEncoding=utf8&useCursorFetch=true&defaultFetchSiz...

06_jdbc

Flandre_rokned的博客

08-31

416

06_jdbc