postgresql共享行锁实现原理研究

最新推荐文章于 2025-06-30 22:46:07 发布
原创 最新推荐文章于 2025-06-30 22:46:07 发布 · 1.2k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#postgresql #共享行锁

本文详细探讨了PostgreSQL的行锁机制，包括四种锁模式的兼容情况，加锁流程，以及MultiXact机制，对比了与其他数据库如Oracle、MySQL的行锁实现的区别。

postgresql共享行锁实现原理研究

背景

锁是数据库很重要的机制，postgresql支持表锁，行锁，了解postgresql行锁机制有助于我们在应用中分析和解决行锁的问题。

锁模式

当前postgresql支持4种行锁模式: FOR KEY SHARE, FOR SHARE, FOR NO KEY UPDATE, FOR
UPDATE，我们常见的delete场景获取的均为FOR UPDATE锁，而update场景会获取FOR NO KEY
UPDATE或者FOR UPDATE，要看有没有唯一索引了。 下面表格记录了4种锁模式的兼容情况。

在这里插入图片描述
加锁流程

  1. 首先加事务Exclusive锁
    行锁等到事务提交才会释放，其他事物如果等待这个行锁，必须等待这个事务锁释放。以Update为例，首先分配一个事务xid，这个时候会对事务xid加锁，AssignTransactionId->AssignTransactionId->LockAcquire，这个锁是个内存锁。

  2. 判断是否需要锁等待
    如果一个tuple被修改或者删除后，会记录xmax和t_infomask，ExecUpdate->heap_update->HeapTupleSatisfiesUpd

最低0.47元/天 解锁文章
PostgreSQL 锁机制
椟夜
03-14 961
目前大多数商业数据库（DB2, SQL Server）的并发控制采用的是两阶段锁（Two-Phase Locking，2PL）协议，2PL保证了并发事务执行的可串行化。 两段锁协议 2PL在对任何数据进行读、写操作之前，需要对该数据加锁。在封锁相容矩阵中，S锁（Share Locks，共享锁）和X锁（Exclusive Locks，排它锁）是不相容的，因此当事务1正对数据A进行读操作（加S锁）时，...
PostgreSQL数据库的表级锁与行级锁应用
2502_91592937的博客
04-11 765
在多用户并发访问数据库的环境中，为了保证数据的一致性和完整性，需要对数据库资源进行有效的并发控制。PostgreSQL作为一款功能强大的开源关系型数据库，提供了表级锁和行级锁两种不同粒度的锁机制。本文的目的在于深入研究这两种锁机制的原理、应用场景和使用方法，帮助数据库开发者和管理员更好地理解和运用这些锁来优化数据库性能和确保数据的正确性。本文的范围涵盖了表级锁和行级锁的核心概念、算法原理、实际应用案例以及相关工具和资源的推荐。
PG数据库内核分析学习笔记_MultiXact日志管理器
liuhhaiffeng的专栏
02-18 1665
PG数据库内核分析学习笔记_MultiXact日志管理器 MultiXact日志是PG系统用来记录组合事务ID的一种日志. 由于PG采用了多版本并发控制, 因此同一个元组相关的事务ID可能有多个, 为了在加锁(行共享锁)的时候统一操作, PG将与该元组相关联的多个事务ID组合起来用一个MultiXactID代替来管理.同CLOG, SubTrans日志一样, MultiXact日志也是利用SLRU...
pg内核之日志管理器（二）MultiXact日志
mirai_D_zoro的博客
03-23 1062
MultiXact日志时数据库用来记录组合事务ID的日志。正常情况下，当事务更新一个元组或者对一个元组加锁时，其xmax字段会填入操作该元组的事务ID值，但是当多个事务同时操作一个元组时（如更新元组事务和元组加锁事务），元组的xmax就无法同时记录两个及以上的事务ID了，这时就会分配一个MultiXactID，然后将事务ID保存到MultiXact日志中，这样需要时就能通过MultiXactID就能查到其对应的事务ID了。
postgresql源码学习（十三）—— 行锁①-行锁模式与xmax
Hehuyi_In的博客
05-19 5003
一、 四种行锁 1. 简介与兼容性分析 pg采用元组级常规锁+xmax结合的方式实现行锁。不单纯用元组级常规锁，是为了避免事务修改行过多时，锁表急剧增大导致性能劣化，并且锁表在共享内存中的大小是有限的。 pg中通常有两种方式会用到行锁： 对行执行update,delete操作 显式指定行锁（例如select for update） 在新版本中，显式加行锁共有4种写法 行锁类型 简介 FOR UPDATE ...
postgreSQL在事务内使用共享锁,临时表的操作
tiantangpw的专栏
09-08 197
postgreSQL在事务内使用共享锁,临时表的操作
【数据库学习】Postgres(PG)原理及底层实现
午后阳光
03-23 9156
事务（transaction）：是用户定义的一组数据库操作，要么全做要么全不做，失败即回滚。保存点（savePoint）在一个大的事务中，可以把操作过程分成几个部分，第一个部分执行成功后可以建一个保存点，若后面的部分执行失败，则回滚到此保存点，而不必回滚整个事务。事务的实现即：RDBMS采取何种技术确保事务的ACID特性？回退（rollback）：撤销sql执行过程。事务管理可以管理insert、update、delete语句；不能回退create、drop操作。
PostgreSQL数据库的性能测试报告生成
AI天才研究院
06-21 1243
本报告系统阐述PostgreSQL性能测试报告的生成方法论，覆盖从测试设计到报告输出的全生命周期。通过结合第一性原理（如Little定律、排队论）与工程实践，构建包含基准测试、负载测试、压力测试的多层次测试框架；定义涵盖吞吐量（QPS）、响应时间（RT）、并发能力（CC）、资源利用率（CPU/Memory/Disk/I/O）的核心指标体系；解析pgBench、sysbench、JMeter等工具的适配场景；最终形成结构化报告模板，包含测试环境、用例设计、结果分析、瓶颈诊断、优化建议五大模块。
PostgreSQL数据库的锁等待问题排查
最新发布
AI天才研究院
06-30 898
本文旨在帮助开发者和DBA掌握PostgreSQL锁等待问题的排查方法。PostgreSQL的核心锁类型与兼容性规则如何通过系统表定位阻塞事务真实业务场景中的排查实战锁等待的预防与优化策略本文从生活案例引入锁的概念，逐步讲解PostgreSQL的锁类型、兼容性规则，然后通过“查、看、断、防”四步排查法演示实战过程，最后总结预防策略。锁等待（Lock Wait）：一个事务请求的锁被另一个事务持有时，需等待对方释放锁事务（Transaction）：数据库操作的最小原子单元（如“下单+扣库存”）
PostgreSQL 源码解读（220）- Locks(LOCK Struct)
09-02 1194
本节是PostgreSQL Locks中介绍LOCK结构体部分,翻译自README文件. 一、LOCK Struct /* ...
Postgresql锁的简单介绍
背着梦的幸存者
09-04 799
  锁主要是为了保持数据库数据的一致性，可以阻止用户修改一行或整个表，一般用在并发较高的数据库中。   在多个用户异步访问数据库时，如果不对其进行限制可能会出现读取数据和存储数据的不一致性。   数据库中有两种基本的锁：共享锁（SHARE）、排它锁（EXCLUSIVE）。 如果数据对象加上排它锁，则其他的事务不能对它读取和修改。 如果加上共享锁，则该数据库对象可以被其他事务读取，但不能修改。...
pg库sharelock_PostgreSQL 行锁解读
weixin_35747785的博客
01-14 1060
像其它数据库一样，PostgreSQL数据库不仅有表级别的锁，同时也有行级别的锁。行锁对于提高系统的并行度至关重要。那么PostgreSQL是如何实现行锁的呢？PostgreSQL获取行锁的大致分为以下两个阶段：1.获取buffer page级别的锁这是一个buffer content锁，不是单纯的buffer pin，当然buffer pin的次数肯定会增加。buffer content锁分为s...
PostgreSQL 行锁解读
06-14 1156
像其它数据库一样，PostgreSQL数据库不仅有表级别的锁，同时也有行级别的锁。行锁对于提高系统的并行度至关重要。那么PostgreSQL是如何实现行锁的呢？ PostgreSQL获取行锁的大致分为以...
PostgreSQL中的行锁
魂醉的一亩二分地
05-22 3404
FOR UPDATE：该模式允许修改任何元组字段，甚至删除整个元组FOR NO KEY UPDATE：对除主(唯一)键外的字段更新，此更改也不影响外键FOR SHARE：当我们需要读取一行，但不允许其他事务更改它时,使用该模式FOR KEY SHARE：读该行的键值，但只允许对除键外的其他字段更新。在检查外键约束时会自动使用该锁。
什么是 MultiXactId？
howard_shooter的博客
09-14 906
并发事务实现中，有时某个事务需要对上万行加锁，此时锁对象不适于放在内存中，PG采取的策略是，将加锁事务的ID设置到被锁记录的xmax中，同时设置t_infomask表示记录被锁，以此表示记录被锁住（共享锁或互斥锁）。 但是，当多个事务都要对某行记录，加共享锁时，又怎样表达呢？上述的机制，看起来没法表示多个事务对记录加共享锁的情况。 解决办法就是，用一个特殊的事务ID（MultiXactId）代替所有加锁的事务ID，然后建立MultiXactId与这些事务ID的对应关系。例如： 对于上图的场景，如果
PostgreSQL锁机制——行级锁
Focus on PostgreSQL
09-06 4692
PostgreSQL除了表级锁之外,还有行级锁。需要注意的是一个事务可能会在相同的行上保持冲突的 锁，甚至是在不同的子事务中。但是除此之外，两个事务永远不可能在相同的行上持有冲突的锁。 行级锁不影响数据查询，它们只阻塞对同一行的写入者和加锁者。 FOR UPDATE FOR UPDATE会导致由SELECT语句检索到的行被锁定，就好像它们要被更新。这可以 阻止它们被其他事务锁定、修改或者删除，一直...
【0117】pg_multixact管理器
Postgres 数据库内核开发工程师
08-17 568
中，以标识每个成员事务在任何给定元组上持有的锁模式。此模块仅包含对存储和检索数组的支持。的数据开始偏移量，另一个用于保存偏移量。通过仔细跟踪每个表的使用值，我们能够删除不再需要的段：在。值时，考虑到全局最小值，要注意计数器不落在环绕的范围内。页面初始化为零时，该模块生成一条记录，以及当一个新的。标志位的含义对于本模块是不透明的，但它们主要用于。计数器至少与我们在重播期间看到的任何东西一样大。的一部分，保存在共享内存中。不同的是，我们必须在崩溃之间保持状态，并确保。的证据，我们只是确保在重播结束时，...
openGauss数据库源码解析系列文章——存储引擎源码解析（五）
Gauss松鼠会
07-30 8116
上一篇我们详细讲述“4.2.4 ustore”相关内容。本篇我们将继续为小伙伴们带来“4.2.5 行存储索引机制”、“4.2.6 行存储缓存机制”及“4.2.7 cstore”等精彩内容的详细介绍。 4.2.5 行存储索引机制 本节以B-Tree索引为例，介绍openGauss中行存储（格式）表的索引机制。索引本质上是对数据的一种物理有序聚簇。有序聚簇参考的排序字段被称为索引键。为了节省存储空间，一般索引表中只存储有序聚簇的索引键键值以及对应元组在主表中的物理位置。在查询指定的索引键键值元组时，得益
pg事务：multixact
liuzhilong的博客
05-20 1464
在对同一行加锁时，元组上关联的事务ID可能有多个，pg将多个事务ID组合起来用一个MultiXactID来管理
PG 行锁
05-10
<think>好的，用户想了解PostgreSQL中的行锁机制及常见问题。首先，我需要回忆一下PostgreSQL的行锁相关知识，并结合之前提供的引用内容来组织答案。 首先，用户提到的引用[3]指出PostgreSQL的行锁实现与Oracle和MySQL不同，Oracle使用ITL，而MySQL用bitmap。PostgreSQL的行锁可能是在元组头部存储锁信息，这应该涉及到xmax和锁标记位。需要解释行锁的基本原理，比如通过SELECT FOR UPDATE和FOR SHARE来获取锁。 接下来，使用方法部分应该包括不同的锁模式，如FOR UPDATE（排他锁）和FOR SHARE（共享锁），以及NOWAIT和SKIP LOCKED选项。这部分需要给出具体的SQL示例，比如如何锁定选中的行，避免阻塞。 常见问题方面，用户可能遇到锁冲突、死锁、长时间持有锁导致性能问题。引用[1]提到用pg_locks视图查看锁信息，这可能用来诊断锁冲突。另外，引用[4]提到PostgreSQL的乐观锁机制，默认的隔离级别能够处理并发更新，这可能与死锁避免有关。需要解释如何排查死锁，比如使用pg_stat_activity和pg_locks结合查询，或者查看日志。 优化建议部分可以包括减少锁的持有时间、合理使用锁选项、监控锁状态（如引用[1]中的pg_locks）、使用事务隔离级别（引用[4]中的repeatable read）。此外，注意行锁升级的问题，引用[2]提到常规锁的不同等级，虽然主要讨论表锁，但需要说明行锁不会升级为表锁，与MySQL不同。 需要注意用户可能混淆行锁和表锁，所以需要对比说明，比如PostgreSQL的行锁不会升级，而MySQL在大量行锁时可能用表锁替代。此外，引用[3]提到PostgreSQL的共享行锁实现，可能涉及多版本控制，这也是需要解释的。 最后生成相关问题，比如锁机制对比、死锁处理、监控工具等，确保覆盖用户可能感兴趣的扩展内容。</think>### PostgreSQL行锁机制详解 #### 一、行锁实现原理 PostgreSQL的行锁通过元组（tuple）头部信息实现，采用多版本并发控制（MVCC）机制。与Oracle的ITL槽位和MySQL的bitmap方式不同，其特点包括： 1. 元组$xmax$字段记录事务ID和锁标记位 2. 共享锁（FOR SHARE）通过设置`HEAP_XMAX_SHR_LOCK`标记 3. 排他锁（FOR UPDATE）通过设置`HEAP_XMAX_EXCL_LOCK`标记 4. 锁信息不单独存储，直接附加在数据行上[^3] #### 二、使用方法 ```sql -- 排他锁（写锁） BEGIN; SELECT * FROM table WHERE id = 1 FOR UPDATE; -- 执行更新操作 COMMIT; -- 共享锁（读锁） BEGIN; SELECT * FROM table WHERE id = 1 FOR SHARE; -- 允许其他事务加共享锁 COMMIT; -- 非阻塞锁 SELECT * FROM table WHERE id = 1 FOR UPDATE NOWAIT; -- 跳过已锁定行 SELECT * FROM table WHERE status = 'pending' FOR UPDATE SKIP LOCKED; ``` #### 三、常见问题及解决方案 1. **锁冲突** - 现象：事务长时间等待 - 排查方法： ```sql SELECT pid, relation::regclass, locktype, mode FROM pg_locks WHERE relation = 'table_name'::regclass;[^1] ``` 2. **死锁检测** - 自动检测：PostgreSQL默认开启死锁检测（deadlock_timeout=1s） - 手动排查： ```sql SELECT * FROM pg_stat_activity WHERE wait_event_type = 'Lock'; ``` 3. **锁升级问题** - PostgreSQL行锁不会升级为表锁，与MySQL不同[^3] - 注意表级锁与行锁的共存规则[^2] 4. **长时间锁持有** - 优化建议： - 缩短事务时间 - 使用`NOWAIT`或`SKIP LOCKED` - 设置合理的锁超时时间 ```sql SET lock_timeout = '3s'; ``` #### 四、优化建议 1. 优先使用`READ COMMITTED`隔离级别 2. 利用隐藏的乐观锁版本字段实现无锁并发控制[^4] 3. 监控工具组合： ```sql -- 实时锁监控视图 SELECT * FROM pg_stat_activity JOIN pg_locks ON pg_stat_activity.pid = pg_locks.pid; ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值