H2数据库连接缓慢，无响应

最新推荐文章于 2022-08-20 19:41:55 发布
最新推荐文章于 2022-08-20 19:41:55 发布
阅读量3.7k 收藏 4
点赞数
CC 4.0 BY-SA版权
文章标签： H2 多线程 查询缓慢 优化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/u011411069/article/details/78617247
本文介绍了在使用H2数据库过程中遇到的问题及解决方案，特别是针对大容量数据时首页糟糕SQL导致的响应延迟。通过调整数据库连接参数，如启用多线程模式、关闭时的行为设置以及多版本并发控制等手段，有效提升了数据库性能。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

jdbc:h2:tcp://localhost:9092/D:/db;MULTI_THREADED=1;DB_CLOSE_ON_EXIT=FALSE;MVCC=TRUE

项目中遇到h2数据库800M后页面无响应，用Dbever工具连接h2数据库文件没有任何异常，仔细查询项目代码后发现是因为我们首页有糟糕的sql，在数据量大时耗时3分钟以上，默认h2是单线程模式，在有耗时sql执行时，所有后续查询都排队等候导致页面长时间无响应

可加入以下参数解决，后两个可根据需要取舍；

MULTI_THREADED：默认下为0（禁用），也就是说无论你连接池开多大，sql执行都是单线程串行执行，当有一个耗时sql执行时，其他连接的sql一样要等候，改为1开启多线程模式，不会导致耗时sql影响其他查询，不过文档描述此参数目前是实验性的，稳定性还不得而知


DB_CLOSE_ON_EXIT：退出时关闭数据库默认为TRUE，默认值存在的问题是当程序退出时可能会有一些日志记录，或者清理数据库的操作，此时数据库先关闭会报错：database already closed！


MVCC=TRUE：多版本并发控制，默认为false，开启后并发更新不会采用老式的加写锁模式，会改为读锁，更新的操作都会带着自己要更新的值与更新前值的版本号，当版本号对应时更新成功同时修改值对应的版本号，其他并发的数据再来时因为所持有的版本号已经不对应，所以会更新失败，类似于java的乐观锁机制，目的就是容忍小部分的失败换取更大的吞吐量（没有锁的上下文切换换耗时）

淘金者05012
关注
MyBatis集成Druid数据库连接池——提升数据库连接效率
AI天才研究院
07-28 2449
随着互联网信息技术的飞速发展，网站日益复杂，用户访问量激增，网站的负载压力也越来越高。为了保证网站的稳定运行和可靠服务，网站开发者需要根据网站运行状况进行优化和升级。如何更好地管理和使用数据库资源是网站开发者面临的重要课题之一。MyBatis 是一种优秀的持久层框架，它支持自定义 SQL、存储过程以及高级映射。MyBatis 和 Hibernate 等ORM 框架一样，都可以使用基于 Java 的 XML 配置或者注解的方式，将对象关系映射到数据库中。
mysql和h2性能_MySQL存储写入性能严重抖动分析
weixin_28930859的博客
02-02 341
案例描述：通过iostat发现存储的写性能长期维持在10MB左右，而且因为写性能差已经导致数据库性能变差；两个小时以后，iostat发现系统的写性能已经能够到100MB以上，数据库性能也恢复正常。也就是说，在对系统、数据库监控中，出现了性能波谷，存储写入性能严重抖动，为什么？一、原理过程 由上原理图，进行过程解析：1、事务提交，修改buffer_pool中的数据形成脏页，并且同时生成redo日志，...
使用JAVA内存数据库h2database性能优化
11-18
我们在开发应用都知道ＩＯ是系统性能的瓶颈，在应用开发中，我们会经常碰到以下问题： 1.系统在不断实时地访问数据库时，一秒钟对同一个表操作几千，几万次以上，导致数据表死锁或则处理太慢； 2.对数据实时计算，而且数据量很大时，比如电信系统的电信的二次批价和实时累账 3. 需实时统计数据，监控海量数据问题，比如ATM监控系统的可疑交易监控（广东中行）
h2 MySQL 速度_H2数据库：虽然使用索引,但查询速度慢
weixin_31322465的博客
01-19 1080
使用H2 1.3.176.1)表定义：CREATE TABLE TEST(ID BIGINT PRIMARY KEY, ACCOUNT BIGINT, TXID BIGINT);2)将值插入表中：INSERT INTO TEST SELECT X, RAND()*100, X FROM SYSTEM_RANGE(1, 1000000)3)创建用于我的查询的索引：CREATE Unique INDE...
h2 MySQL 速度,H2数据库：尽管使用索引，但查询缓慢
weixin_32060735的博客
02-23 295
Using the H2 1.3.176.1) table definition:CREATE TABLE TEST(ID BIGINT PRIMARY KEY, ACCOUNT BIGINT, TXID BIGINT);2) inserting values into the table:INSERT INTO TEST SELECT X, RAND()*100, X FROM SYSTEM_R...
H2 数据库，进程死锁导致访问异常的问题
抱朴守拙
06-23 3397
问题现象：H2数据库启动后，Web Server运行正常，能通过9090端口访问，但无法访问数据库。问题复现：通过启动脚本重启H2数据库，复现的概率非常高（测试人员反应运行中的H2数据库也会出现连接异常的问题，该场景暂时未复现）。问题分析：初步断定是进程死锁导致。根据程序的堆栈信息，也支持这一判断。对造成死锁的原因进行分析：1 H2服务器有多种启动方式，我们使用的是Console模式，且全部使用默认
记录一下使用h2内存数据库中出现的问题
injnocenter的博客
08-20 1565
4. 其他报错SQL插入失败的问题，到SQL文件检查一下，可以有空格、多余的字符等问题，基本都是使用mysql自动导出的SQL语句产生的。1.出现无法加载bean的问题，原因是数据库未能成功创建。定位到DDL建表语句中出现特殊字段，如““等，不能被识别导致数据库构建失败。3. 查询语句报错，出现没有在SELECT的列时。双引号惹的祸，改成单引号就没问题了！2.h2数据库配置文件的URL配置。
提升响应速度必备：H2 Database连接池管理实战指南！
[提升响应速度必备：H2 Database连接池管理实战指南！](https://opengraph.githubassets.com/f0dcbcd08e25ba0aa8fa129104cd2c0eb716c0c87df95315ac5b34c6d00bc063/HeidiSQL/HeidiSQL/issues/963) # 1. H2 Database...
深入解析H2数据库架构：内存表与持久化存储的奥秘！
[深入解析H2数据库架构：内存表与持久化存储的奥秘！](http://www.h2database.com/html/images/console-2.png) # 1. H2数据库概述 H2数据库是一个流行的开源关系型数据库管理系统，它以Java编写，能够嵌入应用程序...
MySQL数据库连接驱动选择与性能对比：优化连接效率，选择最优驱动
连接驱动通过标准化数据库访问接口，简化了应用程序与数据库的交互，并提供了连接池管理、连接参数配置和连接管理等功能。 连接驱动通常由第三方开发，并提供多种语言和平台的支持。常见的MySQL连接驱动包括：
解决数据库连接超时的问题
热门推荐
donspe的博客
04-25 3万+
查看数据库的连接超时时间show global variables like 'wait_timeout'; 2.在拥有权限的情况下直接使用sql语句进行设置set global wait_timeout=90;3.在权限不足的情况下可以通过修改spring-common配置文件来达到效果将这个最大连接数改为0即可解决问题----问题描述:        程序有一项功能,每隔两小时检查一下...
H2数据库连接失败
campuscrowd的博客
12-23 4182
h2数据库连接失败的可能原因
h2数据库优缺点
sprita1的专栏
08-17 1万+
h2数据库是嵌入式的内存型数据库，也可以存储在磁盘上，效率比通过socket调用的redis执行的要快 纯java编写就一个jar h2数据库的缺点是不适合大数据量高并发的操作...
java h2 性能_最佳实践使用JAVA内存数据库h2database性能优化.doc
weixin_39993623的博客
02-13 1273
最佳实践使用JAVA内存数据库h2database性能优化最佳实践：使用JAVA内存数据库h2 database性能优化分类：Java性能优化作者：凡彬勇日期：2011-08-1导读：使用JAVA内存数据库h2 database性能优化，提高数据处理速度，解决IO瓶颈问题问题我们在开发应用都知道ＩＯ是系统性能的瓶颈，在应用开发中，我们会经常碰到以下问题：1.系统在不断实时地访问数据库时，一秒钟对同...
数据库多表关联查询效率问题解决方案
u013948191的专栏
12-29 3400
最近在做项目中遇到多表关联查询排序的效率问题（5张以上40W+数据的表），查询一次大概要20多秒，经过一番苦思冥想，处理方案如下: 　　1、软件设计初期，需要一对一关联的表应该设计在一张大表里，这样虽然字段多些，但是对于查询的速度提升是非常明显的，特别是在排序的情况下。 　　2、我们在关联的时候可能需要排序的表之前其中的一张或者两张，我们可以先针对这两张需要排序的表先查询排序，然后再用
JdbcPool.getConnection()卡死情况记录
weixin_30265171的博客
11-24 1091
在做websocket开发的时候，后台使用java开发，在前端连接的接口中，有读取数据库进行验证的动作。其中连接数据库部分使用了dbcp做缓冲池，在获取连接的时候，使用了一个嵌套(这个嵌套简直害死人，还我调试了两天)，嵌套了两个try finally，在每个try中都获取连接getConnection,在每个finally中都释放连接release把连接归还给缓冲池。代码如下： Connecti...
查询数据过多页面反应慢引入缓存解决方案（Redis、H2）
java
10-08 4451
查询数据过多页面反应慢引入缓存解决方案（Redis、H2）问题：原系统查询接口不支持分页也不可能加入分页支持，导致Ajax查询数据过多，返回数据达到2W多条记录时响应已经极慢，查询功能不要求数据实时性，页面反应速度极慢、体验不好；经排查是由于数据量过大导致写回页面的时候慢，实现是直接Servlet输出流写到页面上（output.write(buffer, 0, b)）；需求变更：加快页面相应速度，页
H2内存数据库
anttu的专栏
05-21 8224
之前项目中用到了H2内存数据库，做下整理： H2数据库介绍 常用的开源数据库：H2，Derby，HSQLDB，MySQL，PostgreSQL。其中H2，HSQLDB类似，十分适合作为嵌入式数据库使用，其它的数据库大部分都需要安装独立的客户端和服务器端。 H2的优势： 1、h2采用纯Java编写，因此不受平台的限制。 2、h2只有一个jar文件，十分适合作为嵌入式数据库试用。 3、
H2数据库使用
GY的的专栏
02-08 2537
官网： H2 Database Enginehttp://www.h2database.com/html/main.html h2database Maven配置 <dependency> <groupId>com.h2database</groupId> <artifactId>h2</artifactId> <version>1.4.199</version> &l..
ktor连接操作数据库
最新发布
03-24
<think>好的，我现在需要帮助用户了解如何在Ktor中连接和操作数据库。首先，用户可能已经知道Ktor是一个轻量级的Kotlin框架，但可能对数据库集成不太熟悉。我需要先回顾Ktor的基本概念，然后逐步介绍数据库连接的步骤。 首先，我应该确认用户是否了解Ktor的基础知识，比如路由、插件等，但根据问题，用户可能已经有一定的了解，所以直接进入主题。用户的问题是关于数据库连接，所以需要涵盖常用的库，比如Exposed和HikariCP，以及可能的ORM工具。 接下来，我需要考虑用户可能的实际应用场景。例如，他们可能正在构建一个REST API，需要持久化数据。这时候，选择合适的数据库驱动、连接池和事务管理是关键。需要比较不同的库，比如Exposed和Jasync SQL，说明各自的优缺点，帮助用户做出选择。 然后，要详细说明配置步骤，比如添加依赖项、配置数据库连接参数、使用插件或手动管理连接。可能需要提供代码示例，这样用户可以直接参考。例如，使用HikariCP配置连接池，然后结合Exposed进行数据库操作。 同时，需要考虑异常处理和资源管理，比如正确关闭数据库连接，避免内存泄漏。这部分对于生产环境的应用非常重要，用户可能需要了解最佳实践。 另外，用户可能对异步操作感兴趣，尤其是在Ktor的协程环境下，如何高效地进行非阻塞数据库操作。这时候，解释Kotlin协程与数据库交互的方式，比如使用suspend函数，会很有帮助。 最后，总结最佳实践，比如使用连接池、选择适合的ORM、遵循事务管理原则。还要提醒用户注意依赖库的版本兼容性，以及测试数据库操作的重要性。</think>以下是关于在Ktor中连接和操作数据库的详细指南： --- ### 1. **基础配置流程** #### **步骤1：添加依赖项** 在`build.gradle.kts`中添加常用数据库驱动和工具： ```kotlin // 使用Exposed作为ORM库 implementation("org.jetbrains.exposed:exposed-core:0.42.1") implementation("org.jetbrains.exposed:exposed-jdbc:0.42.1") // H2数据库示例（可替换为MySQL/PostgreSQL等） implementation("com.h2database:h2:2.2.224") // Hikari连接池 implementation("com.zaxxer:HikariCP:5.1.0") ``` #### **步骤2：配置数据库连接** 在`application.conf`中定义数据源： ```hocon ktor { deployment { port = 8080 } database { driverClassName = "org.h2.Driver" jdbcURL = "jdbc:h2:mem:test;DB_CLOSE_DELAY=-1" username = "sa" password = "" maxPoolSize = 10 } } ``` #### **步骤3：初始化数据库连接** 在`Application.kt`中初始化Hikari连接池： ```kotlin import com.zaxxer.hikari.HikariConfig import com.zaxxer.hikari.HikariDataSource fun Application.module() { val config = HikariConfig().apply { driverClassName = environment.config.property("ktor.database.driverClassName").getString() jdbcUrl = environment.config.property("ktor.database.jdbcURL").getString() username = environment.config.property("ktor.database.username").getString() password = environment.config.property("ktor.database.password").getString() maximumPoolSize = environment.config.property("ktor.database.maxPoolSize").getString().toInt() } val dataSource = HikariDataSource(config) // 注册数据库关闭钩子 environment.monitor.subscribe(ApplicationStopping) { dataSource.close() } } ``` --- ### 2. **常用操作模式** #### **模式1：使用Exposed ORM** 定义数据表结构： ```kotlin object Users : Table("users") { val id = integer("id").autoIncrement() val name = varchar("name", 50) val email = varchar("email", 100).uniqueIndex() override val primaryKey = PrimaryKey(id) } ``` 执行CRUD操作： ```kotlin // 插入数据 transaction { Users.insert { it[name] = "Alice" it[email] = "alice@example.com" } } // 查询数据 val users = transaction { Users.selectAll().map { row -> User( id = row[Users.id], name = row[Users.name], email = row[Users.email] ) } } ``` #### **模式2：原生SQL操作** 使用JDBC直接执行SQL： ```kotlin val connection = dataSource.connection connection.prepareStatement(""" CREATE TABLE IF NOT EXISTS products ( id INT PRIMARY KEY AUTO_INCREMENT, name VARCHAR(255) NOT NULL, price DECIMAL(10,2) ) """).executeUpdate() ``` --- ### 3. **异步操作优化** #### **方案1：协程上下文管理** 在Ktor路由中安全使用数据库连接： ```kotlin get("/users/{id}") { val userId = call.parameters["id"]?.toIntOrNull() ?: throw BadRequestException("Invalid ID") val user = withContext(Dispatchers.IO) { transaction { Users.select { Users.id eq userId }.singleOrNull() } } if (user != null) { call.respond(user) } else { call.respond(HttpStatusCode.NotFound) } } ``` #### **方案2：响应式驱动集成** 使用`kotlinx.coroutines`与异步数据库驱动（如Vert.x PostgreSQL客户端）： ```kotlin implementation("io.vertx:vertx-pg-client:4.5.1") val pgPool = PgPool.pool( connectOptions { host = "localhost" port = 5432 user = "postgres" password = "secret" database = "mydb" }, poolOptions { maxSize = 5 } ) get("/async-users") { val rows = pgPool.query("SELECT * FROM users").execute().await() call.respond(rows.map { it.toJson() }) } ``` --- ### 4. **事务管理实践** #### **声明式事务** 通过扩展函数简化事务操作： ```kotlin suspend fun <T> dbQuery(block: () -> T): T = withContext(Dispatchers.IO) { transaction { block() } } // 使用示例 val result = dbQuery { Users.selectAll().toList() } ``` #### **分布式事务处理** 整合Atomikos实现JTA（适用于多数据源）： ```kotlin implementation("com.atomikos:transactions-jdbc:6.0.0") val config = AtomikosDataSourceBean().apply { uniqueResourceName = "db1" xaDataSourceClassName = "org.postgresql.xa.PGXADataSource" xaProperties = Properties().apply { setProperty("user", "postgres") setProperty("password", "secret") setProperty("serverName", "localhost") setProperty("portNumber", "5432") setProperty("databaseName", "db1") } } ``` --- ### 5. **性能优化建议** 1. **连接池配置** - 根据负载调整`maxPoolSize`（通常设置为`CPU核心数 * 2 + 有效磁盘数`） - 启用`connectionTestQuery`（如MySQL的`SELECT 1`） 2. **批处理优化** ```kotlin transaction { // 批量插入10,000条数据 Users.batchInsert((1..10_000).map { index -> mapOf( Users.name to "User$index", Users.email to "user$index@test.com" ) }) } ``` 3. **索引策略** 通过Exposed DSL创建索引： ```kotlin object Logs : Table("access_logs") { val timestamp = datetime("timestamp") val userId = integer("user_id") init { index("idx_log_user", false, userId) index("idx_log_time_user", true, timestamp, userId) } } ``` --- ### 6. **常见问题排查** - **连接泄漏检测** 在Hikari配置中启用泄漏监测： ```kotlin config.leakDetectionThreshold = 5000 // 5秒未关闭连接即报警 ``` - **慢查询日志** 通过JDBC拦截器记录耗时操作： ```kotlin implementation("net.ttddyy:datasource-proxy:1.8.1") val proxyConfig = ProxyDataSourceBuilder.create(dataSource) .logQueryBySlf4j(SLF4JLogLevel.WARN) .build() ``` - **连接超时处理** 配置重试策略（使用Retrofit风格库）： ```kotlin implementation("com.github.shyiko.ktorm:ktorm-core:3.6.0") val db = Database.connectWithRetry( url = "jdbc:postgresql://localhost/test", retries = 3, delay = Duration.ofSeconds(2) ) ``` --- ### 总结 在Ktor中操作数据库的关键要点： 1. **灵活选择工具链**：根据项目规模选用Exposed（轻量）或成熟ORM（如JOOQ） 2. **协程友好设计**：利用`Dispatchers.IO`避免阻塞主线程 3. **生产级配置**：必须配置连接池和事务管理器 4. **监控集成**：结合Micrometer实现指标收集 对于新项目，推荐使用**Exposed + HikariCP**组合；若需要复杂查询，可搭配**Jasync SQL**实现非阻塞访问。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值