Beginning PostgreSQL on the Cloud读书笔记 (2) PostgreSql的架构和配置

OpenClaw AI Agent网关工程化部署实战指南 AI Agent网关是连接大模型与业务系统的中间件,其核心在于统一API抽象、多源模型路由与生产级运维保障。原理上需解决模型协议适配、鉴权限流、热加载与跨平台兼容等关键问题。技术价值体现在降低企业接入多厂商大模型(如Qwen3、DeepSeek V3.2、百炼Token Plan)的集成成本与运维复杂度。典型应用场景包括智能客服中台、财务自动化助手和内部知识库问答系统。本文聚焦OpenClaw v2.4+在阿里云轻量应用服务器上的可落地部署,深度解析RockyLinux 9.4环境初始化、二进制热更新机制及 阅读详情

接着上一篇文章对DBaaS的介绍,这一次介绍Postgresql的基本情况.

PostgreSQL is the world’s most advanced Open Source database.
而mysql是最流行的开源数据库,事实证明,确实postgresql是要强大许多的.

  • 可移植性
    • 由ANSI C开发,高性能并且可以在windows,mac,linux,unix上运行
  • 可靠
    • 遵循ACID,
      • atomicity
        • 原子性,也就是一个失误中的所有操作要么都发生,要么都不发生,比如给人转账
      • consistency
        • 也就是之前的状态A,和我这个事务希望他变成什么状态B,再经过事务后,确实变成了状态B
      • isolation
        • 通过在事务并发的时候,添加锁,来保证事务之间不会互相影响
      • durability
        • 事务完成后,更改是保存在磁盘中的,不会造成回滚
    • 支持事务
      • 失败的事务可以回滚
    • 支持保存点
      • 在事务中创建保存点,并且回滚到这个点
    • 写前日志
      • 通过在写前先写日志来防止机器挂掉
  • 可伸缩
    • 通过多版本的并发控制来防止数据的不一致
    • 支持表分区来提高性能
  • 安全
    • 提供限定主机的访问控制,也就是这能某些机器能够访问这个数据库
  • 可用
    • 支持主从库,这在负载均衡中很有用
    • 在灾难情况下支持流式分库来保证高可用
  • 先进
    • 支持全文搜索
    • 支持触发功能
    • 支持存储过程
    • 支持热备份,时间点恢复
MVVC(Multi-Version Concurrency Control):
通过在读写的时候,对每一个事务生成快照,等一下然后再写入或者读取,使得读不会阻塞写,写不会阻塞读,进而提高并发性能

Write Ahead Logging (WAL)
通过写前日志机制来实现崩溃的恢复.
1. 在每个insert/update/delete操作前都先生成一个记录
2. 在日志被写入磁盘前不认为数据是安全的
3. 在数据库崩溃的时候提供恢复
4. 然后REDO,再执行一次

Postgresql的限制:

  • 整个数据库的大小是没有限制的
  • 单表最大32TB,很大很大了
  • 单行最大1.6TB
  • 单个字段最大1GB
  • 根据列的数据类型,最大支持250-600个字段
  • 每张表的索引数无限制

在这里插入图片描述
postgresql架构如上

postgreql是多进程架构,有三种进程

  • primary (postmaster)

  • per-connection backend process

  • utility (maintenance processes)

  • postmaster

    • 当postgresql启动的时候,postmaster首先启动,是整个数据库的管理员,负责数据库的启动和关闭,负责外部的里连接
    • 分配shared memory.
    • 启动 utility processes.
    • 标记自己的状态
    • 接受来自外部的连接
  • backend process

    • postmaster接受到来自外部的连接,就创建一个backend process,进而进行验证连接的合法性,如果ok,就把这个进程附加到会话中

安装教程就不写了,其他地方到处都是

数据库的配置

postgresql.conf一般在/etc/postgresql/11/main下

在这里插入图片描述
可以修改其中的参数,来获得更好的性能和稳定性

连接部分

listen_addresses

默认localhost仅提供本机访问,可以指定可以访问的主机,用逗号隔开,*表示所有主机都可以访问

port

监听的端口,默认5432

max_connections

最大连接数,默认100,随着值的增大,也会小号更多的内存

superuser_reserved_connections

允许最大超级用户连接数,默认为3,且会挤占所有的连接数

安全部分

authentication_timeout

默认一分钟,超过一分钟则验证失败

ssl

连接启用ssl

ssl_ciphers

ssl启用的cipher

内存部分

shared_buffers

很重要的参数.!

进程默认128MB,经验上是调整为内存的25%

temp_buffers (default 8MB)

临时表创建的时候,用于存储临时数据

work_mem (default 1MB):

每一个排序或哈希操作所占用的内存,默认比较保守,如果需要增加,经验上是最大连接数占用内存的25%

maintenance_work_mem(default 16MB)

创建每个索引的时候占用的内存

写前日志设置

wal_buffers (default 64KB):

WAL数据需要的数据,读写繁忙的数据库需要调整到1-16MB

checkpoint_timeout (default 5 minutes):

默认5分钟做一次check point

日志地址

log_directory

log路径

log_filename

用于设置log file的文件名

log_rotation_age

多长时间写下一个log

log_rotation_size

如果log超过这个size就新开一个log

OmniParser:基于屏幕理解的零代码自动化新范式 屏幕理解是实现自然语言驱动人机协作的关键基础能力,其核心在于将视觉信息转化为可执行的语义动作。不同于传统OCR识别文字或UI Automation依赖控件树,现代屏幕理解技术通过视觉编码器+空间关系建模+动作解码的三层架构,实现对界面功能区域的语义化定位与上下文感知操作。该技术显著提升自动化鲁棒性,支撑GPTs交互、零代码自动化等典型场景,在办公提效、无障碍辅助、低代码开发等领域具备广泛落地价值。OmniParser正是这一技术路径的代表性实践。 阅读详情

相关推荐

印度电信套餐统一管理:图数据库+AI实现跨域数据融合

在多源异构系统集成场景中,传统关系型数据库面临关系爆炸、状态漂移与语义模糊三大瓶颈,难以支撑移动与宽带等多域服务的实时协同。图数据库以节点和关系为一等公民,天然适配高连通性业务建模;结合大模型的结构化输出能力,可将自然语言查询精准翻译为Cypher,降低图谱使用门槛。该技术路径已在印度电信领域验证生产就绪性,显著提升跨系统状态一致性、查询响应效率与业务语义表达能力,适用于通信运营商、SaaS服务商及AI工程团队构建智能数据胶水层。

weixin_30851867的博客 813

PostgreSQL 事务与并发控制

而MVCC是一种后验性的机制,读不阻塞写,写也不阻塞读,等到提交的时候才检验是否有冲突,由于没有锁,所以读写不会相互阻塞,避免了大粒度和长时间的锁定,能更好地适应对读的响应速度和并发性要求高的场景,大大提升了并发性能。在该隔离级别,所有事务都可以看到其他未提交事务的执行结果,在多用户数据库中,脏读是非常危险的,在并发情况下,查询结果非常不可控,即使不考虑结果的严谨性只追求性能,它的性能也并不比其他事务隔离级别好多少,可以说脏读没有任何好处。简言之,它是在每个读的数据行上加上共享锁。

这个人很懒什么都没有~ 2002

从抽象需求到工程实现:异构数据转换适配器的设计与复位机制

在软件工程中,数据转换与协议适配是连接异构系统的核心技术。其核心原理在于构建一个中间层,负责读取、解析、清洗并转换不同格式或协议的数据,使遗留系统的低频、非结构化数据能够被现代高效的数据处理平台所消费。这一技术价值在于打通数据孤岛,实现系统间的平滑集成与数据价值最大化,广泛应用于系统迁移、数据中台构建和实时数据管道等场景。本文以“数据转换适配层”和“状态复位机制”为切入点,通过一个将CSV订单文件转换为Kafka消息的具体案例,详细阐述了如何设计一个稳健的转换界面,并实现其初始化、错误恢复等关键运维操作,为

weixin_30706691的博客 377

PGSQL并发控制

并发控制简介 PostgreSQL提供了多种方式以控制对数据的并发访问。在数据库内部,数据的一致性使用多版本模式(多版本并发控制(Multiversion Concurrency Control),即MVCC)维护。这意味着每个SQL语句查询到的数据,是查询开始时间节点的快照(一个数据版本),而与查询期间数据状态无关。此机制确保语句不会查询到由并发事务对同一行数据进行修改而产生的不一致数据,从而为每个数据库会话提供了事务隔离特性。MVCC通过避免传统数据库系统中的锁定方法,最大程度上减小了在多用户并发场景

mymy1026的博客 1331

Doris-Manager 25.2.0部署Doris 4.X

Doris Manager部署Doris

docsz的博客 293

【信息科学与工程学】计算机科学与自动化 第二百三十三篇 凤凰架构02

① Firecracker 为每个 microVM 提供极简设备模型:virtio-net, virtio-blk, serial console。:① BB84:Alice 随机选择基矢(+ 或 ×)发送单光子,Bob 随机测量基矢,比对后保留一致位的子集作为原始密钥。:密度 1 EB/mm³;:① Parquet 文件:行组(Row Group)→ 列块(Column Chunk)→ 页(Page)。

weixin_49199313的博客 138

MVVC与乐观锁和悲观锁

在并发读写数据库时,读操作可能会不一致的数据(脏读)。为了避免这种情况,需要实现数据库的并发访问控制,最简单的方式就是加锁访问。由于,加锁会将读写操作串行化,所以不会出现不一致的状态。但是,读操作会被写操作阻塞,大幅降低读性能。在java concurrent包中,有copyonwrite系列的类,专门用于优化读远大于写的情况。而其优化的手段就是,在进行写操作时,将数据copy一份,不会...

dimei8552的博客 274

3线SWD接线终极指南:用Jlink调试非3.3V设备的5个关键细节

本文详细解析了使用Jlink调试非3.3V设备时,3线SWD接线的5个关键细节。核心在于正确理解并连接Vref引脚以实现电压适配,避免供电冲突,并掌握精简接线法与固件修复技巧。文章以STM32F205等芯片为例,指导开发者安全、高效地进行混合电压调试。

e4f5g6h7的博客 441

关于mysql的事务隔离模式、快照读和当前读、MVCC,并用RC+CAS实现库存处理

声明 由于贴mysql截图会占太大篇幅,影响整体阅读理解,所以没有贴mysql截图,但是下面步骤都是亲自试验过的 四种隔离级别(由低到高) Read Uncommitted读未提交:可以看到其他事务未提交的内容 Read Committed读已提交:可以看到其他事务已提交读内容 Repeatable Read可重复度:事务开始时和事务结束时读到的数据完全相同 Serializable串...

程序猿的世界 2254

【华为Hilink SDK Linux系统开发】目录 开源一小步

目录 【华为Hilink开发】第一章:华为hilink平台简介及开发流程 【华为Hilink开发】第二章:华为hilink SDK网络适配、网关添加删除 【华为Hilink开发】第三章:华为hilink SDK子设备添加、删除 【华为Hilink开发】第四章:华为hilink SDK子设备控制及同步 【华为Hilink开发】第五章:华为hilink SDK适配遇到的问题 ...

开源一小步 3622

FPGA资料分享——FPGA开发板入手指南

FPGA学习,开发板怎么选,看这里,就一个通透

weixin_51627076的博客 7301

Beginning PostgreSQL on the Cloud 电子书分享

下载:Beginning PostgreSQL on the Cloud: Simplifying Database as a Service on Cloud Platforms 本书描述 开始使用云上的PostgreSQL,并发现来自Amazon、Rackspace、Googl...

chongyuwan4121的博客 137

机械臂的运动学分析-工业机器人

机械臂的运动学是研究机械臂各连杆坐标系之间的运动关系,是对机械臂进行运动控制的基础。本章分析了所设计的六自由度机械臂的运动学。理论上六自由度机械臂的工作空间是一个近似球形区域,能够覆盖机械臂所在的位置,但由于机械臂关节的运动范围受到限制,机械臂末端会存在一些不能到达的工作死区,使得机械臂的工作范围和灵活性受到限制。理论上六自由度机械臂的工作空间是一个近似球形区域,能够覆盖机械臂所在的位置,但由于机械臂关节的运动范围受到限制,机械臂末端会存在一些不能到达的工作死区,使得机械臂的工作范围和灵活性受到限制。

qq_59137727的博客 6650

Beginning PostgreSQL on the Cloud读书笔记 (1) DBaaS简介

第一章,介绍云上数据库 What Is Database as a Service? 所谓的DBasS其实就是SaaS的一个子集,只不过第一个S变成了DB,DB毕竟是Software的一种,相比于IaaS,由于不需要用户再去手动的去部署,管理硬件,所以极大的降低了运营的成本. DBaaS简化了部署和测试环节,并且提供了企业级别的故障转移机制和均衡负载,并提供弹性的扩缩容 企业需要什么样的数据...

lyncode的博客 693

ArcMap实战:用栅格计算器搞定16年NDVI趋势分析,附完整F检验流程

本文详细介绍了如何使用ArcMap的栅格计算器进行16年NDVI趋势分析,包括数据预处理、线性趋势计算和F显著性检验的全流程操作。通过实际案例和统计原理解析,帮助GIS从业者掌握植被覆盖变化的分析方法,特别适合生态评估和农业监测应用。

weixin_29251567的博客 254

ArcMap新手必看:5分钟搞定3D地形图制作(附DEM和影像图处理技巧)

本文为ArcMap新手提供了制作3D地形图的快速入门指南。文章详细解析了DEM(数字高程模型)与影像图作为“骨架”与“皮肤”的核心关系,并重点讲解了数据预处理、坐标统一、按掩膜提取等关键技巧,帮助用户在ArcScene中高效构建并优化三维地形场景,实现从平面到立体的专业可视化。

weixin_29281915的博客 108

Beginning PostgreSQL on the Cloud

Beginning PostgreSQL on the Cloud: Simplifying Database as a Service on Cloud Platforms本书描述开始使用云上的PostgreSQL,并发现来自Amazon、Rackspace、Google和azure的云服务的优缺点和局限性。一旦您选择了云服务,您将集中精力保护它并为PostgreSQL实例...

weixin_34253539的博客 217

【定位模块项目实战】正态分布变换(NDT)定位及建图(依赖高精度点云地图和三维激光雷达的定位方案)

系列文章目录 提示:这里可以添加系列文章的所有文章的目录,目录需要自己手动添加 TODO:写完再整理 文章目录系列文章目录前言一、正态分布变换(NDT)定位解决的主要问题二、正态分布变换(NDT)定位的核心思想三、NDT算法流程1.多元正态分布概念2.网格化并计算正态分布参数3.变换参数和最大似然四、使用C++实现NDT配准参考资料 前言 认知有限,望大家多多包涵,有什么问题也希望能够与大家多交流,共同成长! 本文先对依赖高精度地图和激光雷达的定位技术–正态分布变换(NDT)定位做个简单的介绍,具体

qq_35635374的博客 4412

(免积分) Beginning PostgreSQL on the Cloud: Simplifying Database as a Service on Cloud Platforms

Beginning PostgreSQL on the Cloud: Simplifying Database as a Service on Cloud Platforms 本书描述 开始使用云上的PostgreSQL,并发现来自Amazon、Rackspace、Google和azu...

chongyuwan4121的博客 78

使用静态库在嵌入式系统中进行开发

静态库是一种包含预编译对象代码的文件,它可以与应用程序链接在一起,并在编译时将库的代码复制到最终的可执行文件中。静态库是包含预编译对象代码的文件,可以与应用程序链接在一起,并在编译时将库的代码复制到最终的可执行文件中。需要注意的是,由于嵌入式系统的资源限制,开发人员应该仔细选择需要包含在静态库中的功能,并避免引入不必要的依赖关系。需要注意的是,由于嵌入式系统的资源限制,开发人员应该仔细选择需要包含在静态库中的功能,并避免引入不必要的依赖关系。的静态库文件,可以在嵌入式系统的应用程序中使用它了。

ZrElixir的博客 206

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

Beginning PostgreSQL on the Cloud 免积分下载

图书说明: 在云上开始使用PostgreSQL,发现Amazon,Rackspace,Google和Azure的云服务的优势,劣势和局限性。一旦选择了云服务,您将专注于保护它并为您的PostgreSQL实例制定备份策略,作为您的长期计划的一部分。在云上开始PostgreSQL涵...

chongyuwan4121的博客 93

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

【springboot】万字操作指南 Spring Boot 2.x 升级到 3.x:微服务项目实战

摘要: 本文提供Spring Boot 2.x升级到3.x的实战指南,重点针对微服务项目。升级涉及JDK 17、Spring Framework 6、Jakarta EE等连锁变化,需系统规划版本矩阵(如Spring Boot 3.5.x + Spring Cloud 2025.0.x)。建议升级路线:先统一JDK 17环境,再处理依赖迁移(javax→jakarta)、Spring Security 6适配、OAuth2授权服务器改造等关键步骤。

Cjh20pan的博客 987

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

Ubuntu 18.04 下 Kafka 数据迁移实战:备份、导入与平滑迁移三阶策略

Kafka 不是普通消息队列,而是一个强依赖偏移量(offset)、副本状态(ISR)和日志段索引结构的分布式时序存储系统。其数据迁移本质是跨环境重建数据生命周期——需区分容灾备份、集群重建、版本升级与云平台迁移四类场景。在 Ubuntu 18.04 环境中,ext4 文件系统 data=ordered 模式、systemd 的 PrivateTmp 机制、OpenJDK 11 兼容性及 rsync 对隐藏文件(.index/.timeindex)的默认忽略,共同构成迁移失败的底层技术动因。真正可靠的迁移必

weixin_33738982的博客 395
上一篇: Beginning PostgreSQL on the Cloud读书笔记 (1) DBaaS简介
下一篇: Go in Action读书笔记 核心知识点
留意您
博客等级 码龄7年 0粉丝 11原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值