针对DBA的PostgreSQL新发现

PostgreSQL DBA必备的58道基础面试题答案来了 阅读详情

与往常一样,升级或初始化一个新集群的用户将获得更好的性能(例如,更好的并行索引扫描、合并 join 和不相关的子查询,更快的聚合、远程服务器上更加智能的 join 和聚合),这些都开箱即用,但本文中我想讲一些不能开箱即用,实际上你需要采取一些步骤才能从中获益的内容。下面重点展示的功能是从 DBA 的角度来汇编的,很快也有一篇文章从开发者的角度讲述更改。

升级注意事项

首先有些从现有设置升级的提示 - 有一些小的事情会导致从 9.6 或更旧的版本迁移时引起问题,所以在真正的升级之前,一定要在单独的副本上测试升级,并遍历发行说明中所有可能的问题。最值得注意的缺陷是:

所有包含 “xlog” 的函数都被重命名为使用 “wal” 而不是 “xlog”。

后一个命名可能与正常的服务器日志混淆,因此这是一个“以防万一”的更改。如果使用任何第三方备份/复制/HA 工具,请检查它们是否为最新版本。

存放服务器日志(错误消息/警告等)的 pg_log 文件夹已重命名为 “log”。

确保验证你的日志解析或 grep 脚本(如果有)可以工作。

默认情况下,查询将最多使用 2 个后台进程。

如果在 CPU 数量较少的机器上在 postgresql.conf 设置中使用默认值 10,则可能会看到资源使用率峰值,因为默认情况下并行处理已启用 - 这是一件好事,因为它应该意味着更快的查询。如果需要旧的行为,请将 max_parallel_workers_per_gather 设置为 0。

默认情况下,本地主机的复制连接已启用。

为了简化测试等工作,本地主机和本地 Unix 套接字复制连接现在在 pg_hba.conf 中以“信任trust”模式启用(无密码)!因此,如果其他非 DBA 用户也可以访问真实的生产计算机,请确保更改配置。

从 DBA 的角度来看我的最爱

逻辑复制

这个期待已久的功能在你只想要复制一张单独的表、部分表或者所有表时只需要简单的设置而性能损失最小,这也意味着之后主要版本可以零停机升级!历史上(需要 Postgres 9.4+),这可以通过使用第三方扩展或缓慢的基于触发器的解决方案来实现。对我而言这是 10 最好的功能。

声明分区

以前管理分区的方法通过继承并创建触发器来把插入操作重新路由到正确的表中,这一点很烦人,更不用说性能的影响了。目前支持的是 “range” 和 “list” 分区方案。如果有人在某些数据库引擎中缺少 “哈希” 分区,则可以使用带表达式的 “list” 分区来实现相同的功能。

可用的哈希索引

哈希索引现在是 WAL 记录的,因此是崩溃安全的,并获得了一些性能改进,对于简单的搜索,它们比在更大的数据上的标准 B 树索引快。也支持更大的索引大小。

跨列优化器统计

这样的统计数据需要在一组表的列上手动创建,以指出这些值实际上是以某种方式相互依赖的。这将能够应对计划器认为返回的数据很少(概率的乘积通常会产生非常小的数字)从而导致在大量数据下性能不好的的慢查询问题(例如选择“嵌套循环” join)。

副本上的并行快照

现在可以在 pg_dump 中使用多个进程(-jobs 标志)来极大地加快备用服务器上的备份。

更好地调整并行处理 worker 的行为

参考 max_parallel_workers 和 min_parallel_table_scan_size/min_parallel_index_scan_size 参数。我建议增加一点后两者的默认值(8MB、512KB)。

新的内置监控角色,便于工具使用

新的角色 pg_monitor、pg_read_all_settings、pg_read_all_stats 和 pg_stat_scan_tables 能更容易进行各种监控任务 - 以前必须使用超级用户帐户或一些 SECURITY DEFINER 包装函数。

用于更安全的副本生成的临时 (每个会话) 复制槽

用于检查 B 树索引的有效性的一个新的 Contrib 扩展

这两个智能检查发现结构不一致和页面级校验未覆盖的内容。希望不久的将来能更加深入。

Psql 查询工具现在支持基本分支(if/elif/else)

例如下面的将启用具有特定版本分支(对 pg_stat* 视图等有不同列名)的单个维护/监视脚本,而不是许多版本特定的脚本。

SELECT :VERSION_NAME = '10.0' AS is_v10 \gset
\if :is_v10
SELECT 'yippee' AS msg;
\else
SELECT 'time to upgrade!' AS msg;
\endif

这次就这样了!当然有很多其他的东西没有列出,所以对于专职 DBA,我一定会建议你更全面地看发布记录。非常感谢那 300 多为这个版本做出贡献的人!

via: http://www.cybertec.at/best-of-postgresql-10-for-the-dba/

作者:Kaarel Moppel 译者:geekpi 校对:wxy

PG DBA培训文档Ver0.11.pdf PostgreSQL 集群 搭建,培训代码等 立即下载

相关推荐

PostgreSQL 最佳性能优化实践授课PPT 386页

PostgreSQL 最佳性能优化实践授课PPT 386页,适合对PostgreSQL了解的朋友,当然你熟悉mysql或oracle也有参考价值!

pg10新添加的角色

pg10相对于以前的版本有了许多新的特性,权限分立就是十分具有特色的一点。pg10中用户角色分为以下几类: pg_read_all_settings:读取所有配置变量(包括只对超级用户可见的变量) pg_read_all_stats:读取所有 pg_stat_* 视图,使用各种统计相关扩展,包括只对超级用户可见的。 pg_stat_scan_tables:执行监视功能(可能会在表上加 ACCES...

HighGO 1181

PostgreSQL9.3 DBA最佳实战培训PPT 580页

零基础PostgreSQL9.3 DBA最佳实战培训PPT 580页,适合新手入门到运维PostgreSQL数据库系统。

PostgreSQL超级用户下放的权限

各版本对超级用户权限的解耦

多米爸比的专栏 388

comsol-声学

COMSOL多物理场仿真软件以高效的计算性能和杰出的多场耦合分析能力实现了精确的数值仿真,已被广泛应用于各个领域的科学研究以及工程计算,为工程界和科学界解决了复杂的多物理场建模问题。COMSOL内嵌的声学模块可以方便地进行多孔声学和粘热声学的模拟仿真。软件数值计算得到的云图,可以将声压、速度、声强以及声能耗散等结果可视化,十分有利于学生对声学的学习和理解。将COMSOL仿真引入实验当中,通过软件的可视化处理有效直观的展示复杂物理场和集合模型仿真的流程,与实验数据结合,使得文章内容具有说服力、预见性和新颖性。

y2715163545的博客 2376

别再只跑recon-all了!FreeSurfer实战:从T1图像到freeview可视化的完整避坑指南

本文详细解析FreeSurfer从T1图像处理到freeview可视化的全流程,包括环境配置、recon-all深度解析、高级可视化技巧及性能优化策略。特别针对常见错误提供解决方案,帮助用户高效完成MRI数据分析,避免常见陷阱。

weixin_33404102的博客 353

【pg_buffercache安装及使用】

pg_buffercache模块提供了一种方法实时检查共享缓冲区。默认情况下,使用仅限于超级用户和pg_read_all_stats 角色的成员。可以使用GRANT给其他人授予访问权限。pg_buffercache模块可以用来查看shared buffer cache信息,决定shared buffer cache大还是小。 一、安装 [postgres@localhost pg_buffercache]$ pwd /opt/postgresql-12.1/contrib/pg_buffercache

小怪兽的博客 1274

Airsim动态 | 安装ROS包装器(AirSim ROS Wrapper)

本期内容我们将带来在Airsim环境下使用ROS Wrapper的相关教程,以下是AirSim客户端库上的一些ROS Wrapper相关配置。 一、启动 以下步骤适用于 Linux 系统。如果是在 Windows 上运行 AirSim,可以使用 Windows Subsystem for Linux (WSL) 来运行 ROS 包装器,如果不想在主机上安装ROS相关工具,也可以使用Docker容器进行安装。请检查下方内容并按照需求安装,具体内容可以参照最后网址。 如果您的默认 GCC 版本不是8或更高版.

AMOVLAB(阿木实验室) 1776

postgresql 10 的默认角色

os: centos 7.4 db: postgresql 10.6 # cat /etc/centos-release CentOS Linux release 7.4.1708 (Core) # su - postgres -c "psql -c \"select version();\"" v...

一名数据库爱好者的专栏 1814

手把手教你用STM32硬件SPI驱动BMI088陀螺仪(附完整代码)

本文提供了一份详尽的STM32硬件SPI驱动BMI088陀螺仪的实战指南。内容涵盖从硬件连接、SPI底层配置、驱动层封装到设备初始化、数据读取与同步策略,并深入探讨了数据处理、滤波融合及温度补偿等核心技巧,旨在帮助开发者构建稳定高效的IMU驱动框架,解决BMI088应用中常见的挑战。

quiet的专栏 530

C++游戏开发入门:从环境配置到第一个完整项目

C++ 作为游戏开发领域的关键语言,其学习路径常因语法枯燥而令初学者却步。以项目驱动的方式学编程,能帮助学习者将变量、循环、函数、指针等基础概念融入实际游戏逻辑中,获得即时反馈与完整项目经验。掌握合适的开发环境是高效实践的前提,例如在 Windows 下使用 VS Code 搭配 MinGW-w64 编译器,配合调试器与构建脚本,即可搭建轻量可扩展的 C++ 游戏开发工作流。此类课程通常面向无基础人群,从控制台小游戏逐步过渡到带游戏循环的完整作品,过程中还需关注性能观察、素材授权与版本管理。无论你是刚接触编

weixin_30621959的博客 546

连接postgresql_通知:中国PostgreSQL(初级)DBA认证培训 第2期

培训时间:4月27日-5月11日专为PG初级DBA量身打造认证培训课程体系仅限100名一、招生对象1、 熟悉掌握Linux,面临择业的高校毕业生2、 PG零基础,面临转型的数据库管理员3、 长期通过碎片化学习PG,缺乏专业实训导师系统化指导,4、 PG理论层面遗留问题较多,缺乏实战经验的相关从业者二、学习目标1、了解· 了解PostgreSQL的历史、社区、架构、客户群、应用场景、生态角度;· 了...

weixin_30173361的博客 828

Win10网络图标消失,网络图标变成灰色,打开网络设置闪退等问题解决

介绍 主要解决如下问题 网络图标消失 常用方法配置中出现的网络图标变成灰色没有办法打开 打开网络和Internet闪退 错误提示`网络发现已关闭。网络计算机和设备不可见。请启动网络和共享中心的网络发现。 连不上网,诊断结果为 依赖服务或组无法启动 这个问题大概率通过重装系统不能解决,请大家谨慎测试之后最后选择重装这个路线。 方法1:这一步一定要做(卸载三方软件) 把360安全卫士,软件管家这些东西都卸载掉。 我的问题一开始就是这个软件引起的,可能他检测到我还给台式机配了无线网卡,然后就把有线网络的一些

呆呆象呆呆的博客 3万+

你怎么不招聘 DBA

闭眼关灯 (礼尚往来)怎么,系统不稳定,经常出现故障, 你没有招 DBA 吧 ?不用,根本不用,DBA 就是一个运维,我们使用云平台就好,干嘛招聘DBA,我们有开发就好,把活都干了。我们把所有的工作都交给云平台就好,省心,省事,省力。这样的想法昨天刚刚看到,不奇怪,这样的想法的人太多了,不过有一点可以肯定的是,他一般是来自于草台班子,在白话一点,他没有在大企业做过事情,当然另一种可能是,别有...

sql server的专栏 3422

TC8:IPv4_HEADER_01-04

IPv4_HEADER_01: Ensure that the DUT generates an IPv4 Packet with a Total Length greater than or equal to 20 目的 确保DUT生成的IPv4报文的IP头部中的Total Length字段值大于等于20 IPv4协议头部中的Total Length字段表示整个IP数据包的长度,包括IP Header和payload之和,IP首部的长度最少就有20个字节,所以Total Length值肯定大于等于20

jasonj333 3969

保姆级教程:如何将仅限客户端使用的免费大模型(Gemini、Antigravity、Qwen Code、Kiro 等)转为任何应用可调用的 OpenAI 兼容标准接口

大模型 API 费用太贵?💸 这篇文章分享一个薅羊毛神器,能把 Gemini、Qwen Code、Kiro 等客户端专属的免费大模型转换成标准 OpenAI 兼容接口 🔌。支持多协议互转、账户池管理、Web 管理界面,Docker 一键部署,零成本调用 Claude Opus 4.5、Gemini 3 Pro 等高级模型 ✅

XiaoqiangClub的博客 1039

手把手教你如何进行postgresql数据库迁移 让你成为dba大佬

postgresql数据库 迁移 (记一次 postgresql数据库迁移过程) 文章目录postgresql数据库 迁移前言1.准备工作2.分析情况一 业务库 迁移(postgresql数据库)1.数据备份1.1 对源数据库进行备份 前言 因工作需要 需要对数据库所在的linux服务器 进行迁移 更换到新的服务器 1.准备工作 因本次迁移是需要迁移2个数据库,分别是: 分业务库:postgresql数据库 时序库 :TimescaleDB 数据库 环境:linux CentOS 6 数据

yang_z_1的博客 1万+

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

POSTGRESQL 从越来越多的ORACLE DBA 考取 PG 证书, 回顾2019- 2022

首先这不是一个广告贴,只是最近给我的感受,让我不得不写个帖子表达一下,最近一个礼拜,接二连三的之前的ORACLE 的DBA 的同事,纷纷考取了POSTGRESQL 的证书,并且都在最近展示了出来,这不是一个偶然的事件,之前的同事都是ORACLE 的行家里手,虽然不算大咖,也都是咖的title。为什么纷纷转向了POSTGRESQL 的怀抱,二字足以表达,前景,六个字,前...

sql server的专栏 735

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

Folia 歌词播放器安装指南:3 条路线,10 分钟跑通

这是一篇 Folia 安装教程:装完得到一台把歌词渲染成全屏动画的播放器,歌词跟着节拍动,底部播放条管播放、暂停和切歌。覆盖 Windows、macOS、Linux,共 3 条路线,约 10 分钟跑通。Web 自托管部署与源码构建不展开。 [![Folia 安装成果:Lumi 主题全屏歌词动画界面](https://raw.gitcode.com/GitHub_Trending/fo/folia

gitblog_00198的博客 699

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

ORACLE TO POSTGRESQL 来自2天上海的印象

开头还是介绍一下群,如果感兴趣polardb ,mongodb ,mysql ,postgresql ,redis 等有问题,有需求都可以加群群内有各大数据库行业大咖,CTO,可以解决你的问题。加群请联系 liuaustin3 ,在新加的朋友会分到2群(共1000人左右 1 + 2 + 3)新人会进入3群最近去了上海一趟,主要与某个企业在从 ORACLE 数据库转型到POSTGRESQL 有关,2...

sql server的专栏 1091

kubectl-dba:KubeDB数据库管理的终极kubectl插件完全指南

想要在Kubernetes中轻松管理数据库集群吗?😊 kubectl-dba是KubeDB数据库管理平台的官方kubectl插件,为数据库管理员提供了一站式的解决方案。这个强大的工具让你能够像操作原生Kubernetes资源一样管理各种数据库引擎,包括MySQL、PostgreSQL、MongoDB、Redis、Elasticsearch等20多种主流数据库。 ## 为什么需要kubectl-

gitblog_00356的博客 662

云上DBA是诸葛亮,云下的DBA是 关云长,此话怎讲? 4点变化直击要害

这但我深有体会,以前我不怎么能说会道,而自打干上了云上数据库的负责人,变得伶牙俐齿,能说会道,这都归咎于云上的DBA更多的是在协调沟通,在不断和云上的厂商进行产品的沟通,使用中的问题沟通,对于文字和语言描述能力的要求更高,一些技术人员说不清问题,自己干没有问题,就是表达沟通能力不行,在云上被逼得彻底把这个问题治愈了。,新技术应用的业务场景匹配,新技术对于数据库运营成本的节省等等,同时关注云平台本身的生态,并且将更多的工作中心,聚焦到数据库的治理,更加偏向业务逻辑中的数据管理。(附送定期清理连接脚本)

sql server的专栏 939

PostgreSQL DBA快速入门(一) - 准备和部署

为什么80%的码农都做不了架构师?>>> ...

weixin_34366546的博客 1657

PG 日报|每位 DBA 必知的 PostgreSQL 5 大性能瓶颈

他还谈到,AI智能体的兴起正在改变开发者构建软件的方式,以及他们对数据库的新需求。这一举措折射出大型科技公司正在兴起的成本控制趋势——各家企业寻求降低对外部 AI 供应商的依赖,同时控制持续攀升的基础设施成本。EDB 将其 EDB Postgres AI 平台定位为应对多种挑战的替代方案,适用于以下场景:并发负载下查询性能下降、面临 Broadcom 或云厂商续约条款不利,以及因合规或数据主权要求无法将数据迁移至外部环境。作者认为,这种坦诚、全面的测试正是开源社区项目所需要的,也是这类项目存在的意义所在。

IvorySQL的博客 229

POSTGRESQL MYSQL MONGODB 配置文件总结(感谢我的三个DBA)

最近在整理POSTGRESQL MYSQL MONGODB REDIS 的标准化模板配置参数,当然这里面还包含 LINUX 的一些基本配置. 相关的整理的工作是我的三个 DBA...

sql server的专栏 459
上一篇: 接触学习linux系统服务搭建两年来的心得
下一篇: NASA顶级程序员编程十大原则
linuxprobe2017
博客等级 码龄10年 123粉丝 294原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值