postgressql——PGPROC && XLOG（6）

最新推荐文章于 2024-11-18 16:45:01 发布
原创 最新推荐文章于 2024-11-18 16:45:01 发布 · 743 阅读 · 5 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#postgresql

本文详细介绍了PostgreSQL中PGPROC相关结构，包括PROC和XACT的内存布局以及其优化。接着，文章阐述了XLOG的注册过程，解释了页面注册缓冲区和rdata槽位的使用。此外，还分析了日志组装写入的流程，以及UPDATE操作生成XLOG的详细步骤，包括注册阶段和组装阶段。最后，讨论了一条XLOG内部的四个主要组成部分，强调了PostgreSQL如何保证XLOG操作的原子性。

PGPROC相关结构

在共享内存中，核心数据结构围绕PROC_HDR指向的两个list：PROC和XACT
PRCO内存连续，维护链表结构方便申请释放，对应每个后台服务进程，PID为OS标识、PGPROCNO为内部标识
XACT内存连续，维护快照需要的xmin和xid，XACT从PROC拆出来是为了更高的cache line命中率，但是因为xmin的频繁更新，造成更严重的cache line invaild，PG14把这个结构完全优化掉了。

Xlog注册过程

一个页面使用一个register_buffer槽位，最多5个页面
每个页面的其他信息使用rdata槽位形成链表，使用到的rdata用register_buffer的指针指向
maindata独占一些recdata块，保存registerData注册下来的数据
在这里插入图片描述

日志组装写入流程图

组装过程：只有header信息会memcry到链表第一个data区域，其他信息例如页面image、元组内容等都是指针挂在后面的data区域
写入过程：写入只需要遍历list，然后memcpy即可
在这里插入图片描述

update生成XLOG过程&内容解析

注册阶段

  1. 用两个registered_buffers记录新旧页面buffer
XLogRegisterBuffer(0, newbu
最低0.47元/天 解锁文章
【0198】PGPROC数据结构之信号量
Postgres 数据库内核开发工程师
05-30 930
还为每个当前准备好的事务建立一个虚拟的 PGPROC 结构体。这些 PGPROCs 出现在ProcArray数据结构中， 以便准备好的事务看起来仍在运行，并正确地显示为持有锁。可以根据需要将准备好的事务PGPROC与实际事务PGPROC区分开来，因为它具有 pid == 0。准备好的PGPROC中的信号量和锁活动字段是未使用的，但是它的。本文将讲解PGPROC数据结构，包括其成员变量列表，以及各成员变量的作用。在等待锁时，PGPROC被链接到该锁的。结构链表，这些结构将被重新分配给新的后端。
【PostgreSQL】PostgreSQL查用户自定义函数的系统视图
tttzzzqqq2018的博客
01-05 1440
在PostgreSQL中，可以通过以下系统视图查看用户自定义函数：pg_proc：这是存储所有函数信息的系统目录表。它包含有关函数名称、参数、返回类型、语言、安全级别等信息。pg_language：这是存储所有语言信息的系统目录表。它包含有关语言名称、处理器、解释器等信息。pg_namespace：这是存储所有模式信息的系统目录表。它包含有关模式名称、拥有者、注释等信息。通过这些系统视图，可以轻松地查找用户自定义函数的详细信息。该查询将返回自定义函数的源代码、语言名称和模式名称。
【PostgreSQL】执行计划、常用命令
dreambyday
09-21 2237
取某表随机值。 数据加压。 取表的列信息
PostgreSQL 源码解读（108）- 后台进程#1（PGPROC数据结构）
12-12 1632
PostgreSQL使用进程模式，对于每一个客户端会Fork一个后台进程响应客户端的请求。本节介绍了每个后台进程在共享内存中都存在一个的数据结构：PGPROC。 一、数据结构 宏定义 /* * Not...
openGauss 系统表:PG_PROC
weixin_53596073的博客
11-01 963
数组里包括所有参数的类型（包括OUT和INOUT参数），如果所有参数都是IN参数，则这个字段就会是空。请注意数组下标是以1为起点的，而因为历史原因，proargtypes的下标起点为0。例如，对于解释型语言来说就是函数的源程序，或者一个链接符号，一个文件名，或者函数和存储过程创建时指定的其他任何函数体内容，具体取决于语言/调用习惯的实现。请注意，下标对应的是proallargtypes的位置，而不是proargtypes。描述兼容oracle语法定义的函数或存储过程的参数输入字符串，包括参数注释。
postgressql——Xlog（3）
Re_view的博客
05-27 1081
postgressql——Xlog（3）
postgressql——数据库快照（5）
Re_view的博客
05-30 1640
postgressql——数据库快照（5）
postgressql——四种进程间锁（4）
Re_view的博客
05-27 1146
postgressql——四种进程间锁（4）
开源ERP系统ODOO14最佳部署实践——Docker&Aliyun RDS
nuaak的博客
03-27 2948
在阿里云服务器上使用Docker和阿里云RDS的Postgre数据库部署ODOO最新版本。
Postgresql源码（18）PGPROC相关结构
InternalsOf
11-30 1695
下图结构都在共享内存中 核心数据结构围绕PROC_HDR指向的两个list：PROC和XACT PRCO内存连续，维护链表结构方便申请释放，对应每个后台服务进程，PID为OS标识、PGPROCNO为内部标识 XACT内存连续，维护快照需要的xmin和xid，XACT从PROC拆出来是为了更高的cache line命中率，但是因为xmin的频繁更新，造成更严重的cache line invaild，PG14把这个结构完全优化掉了。 图中绿色部分是几个常用的全局便捷指针，指向两个list 例如一个PG10.
查询 postgres 的 proc
cron
02-02 357
psql=> \dS psql=> \d pg_proc psql=> select proname, prosrc from pg_proc order by proname; psql=> \df psql=> select proname, prosrc from pg_proc where proname like 'pg_get%' order by...
PostgreSQL数据库进程数据结构——ProcGlobal
肥叔菌的博客
11-04 696
/* Pointers to shared-memory structures */ PROC_HDR *ProcGlobal = NULL; /* There is one ProcGlobal struct for the whole database cluster. */ typedef struct PROC_HDR { /* Array of PGPROC structures (not including dummies for prepared txns) */ PGPROC
openGauss 系统表:PG_PROC_EXT
weixin_53596073的博客
11-01 233
PG_PROC_EXT系统表是PG_PROC的扩展，存储函数或过程的额外信息。仅函数使用，指定并行游标以HASH分布时的分布键。仅函数使用，指定入参中并行游标的序号。仅函数使用，指定并行游标数据分布方式。PG_PROC_EXT字段。
PostgreSQL启动过程中的那些事七：初始化共享内存和信号十：shmem中初始化PROC索引、辅助进程和信号...
数据库天地
03-05 216
这一节pg初始化进程表，通过InitProcGlobal例程实现，在postmaster或standalone进程启动时初始化全局进程表。pg还创建了支持被请求的backend进程时每个backend进程需要的信号。以前pg仅在backend进程实际启动时分配信号，但是这样不好，因为这样使postgres在加载时失败，很多unix系统被配置/错误配置成在信号数目上比较小，在试着开启了一个进程时信...
【0193】PG内核之释放PGPROC机制
Postgres 数据库内核开发工程师
05-19 908
库函数完成注册，以达到进程退出时候完成相关回调函数自动调用从而完成各函数相关功能的目的。的过程（主要作用是为了让其他后端进程对其进程可见）。因此，同样需要考虑PG内核如何去将该。释放同样采用了相同的机制，只不过定义了另一个数组变量，大小相同。的作用及底层实现原理。它通过事先将回调函数添加到此数组中，然后通过。移除的及释放此PGPROC的过程。这是本文讲解的重点内容。一文中的第3节内容，我们讲解过数组。一文中，提到过PG内核完成将。函数中完成此函数的注册过程。还没有注册到全局数组变量。一文中的第3节内容。
postgresql写单行函数时出现Wrong number of attributes in DATA() entry at ../../../src/include/catalog/pg_proc
liguangxianbin的博客
04-12 300
1.oid设置重复.2.参数的缺少以及多余
openGauss 系统视图：PG_PROC_EXT
最新发布
weixin_53596073的博客
11-18 331
PG_PROC_EXT系统表是PG_PROC的扩展，存储函数或过程的额外信息。仅函数使用，指定并行游标以HASH分布时的分布键。仅函数使用，指定入参中并行游标的序号。仅函数使用，指定并行游标数据分布方式。PG_PROC_EXT字段。
postgresql-11.2-for-perl\src\include\catalog\pg_proc.dat里面的函数OID（1）
fgh123的博客
06-28 873
#---------------------------------------------------------------------- # # pg_proc.dat # Initial contents of the pg_proc system catalog. # # Portions Copyright (c) 1996-2018, PostgreSQL Global Dev...
Oracle中的USER_ARGUMENTS 与 PG中pg_proc 字段转换
weixin_43115457的博客
04-28 1182
昨天将oracle中的sql进行pg库的转化，碰到了系统表记录不同 的问题，记录一下。 Oracle USER_ARGUMENTS 记录当前用户能够访问的函数(存储过程)的一些参数信息(参数名称 参数类型 存储过程的名称 等等)。 pg_proc 这张表类似，但是记录的东西确很杂，记录数据的方式也不同。所以就有需要对pg_proc官方文档 表进行研究对比后 才好解决问题。 下面上实例： Oracl...
PG'OCaml实现Postgres SQL查询扩展教程
接着，开发者可以在代码中使用特定的语法结构来书写SQL查询，例如通过使用特殊的占位符或者直接书写SQL语句，这些语句在编译时期会被处理成与Postgres数据库进行交互的函数调用。这些生成的函数会返回查询结果，这些...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值