Postgres流式备份（1）Barman概述

最新推荐文章于 2025-07-24 12:32:53 发布
原创 最新推荐文章于 2025-07-24 12:32:53 发布 · 830 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

Barman是一款用Python编写的开源工具，专为PostgreSQL提供全面的备份和恢复解决方案。它支持多种备份方式，包括全量备份、基于WAL的增量备份、rsync备份等，适用于不同版本的PostgreSQL服务器。Barman还提供了流备份技术和工具，如pg_basebackup、pg_receivewal等，以及网络压缩和带宽控制功能。

参考文档：http://docs.pgbarman.org/release/2.5/index.html

概述

Barman是使用Python编写的PostgreSQL开源备份和恢复管理器

功能

  • 多种备份方式集成
  • 备份文件的管理

流备份技术和工具

  1. pg_basebackup：用于数据库全量备份
  2. pg_receivewal/pg_receivexlog:用于基于全量对WAL增量备份，可实现很低的数据丢失时间
  3. archive_command：WAL文件切换（写满指定大小或到达指定切换周期）时传递归档日志到备份服务器，有一定的数据丢失时间
  4. rsync：基于块复制进行备份

Barman支持1+2或1+2+3多种备份方式

备份机制

流协议备份

支持PostgreSQL 9.4或更高版本，一般建议使用流协议备份
在这里插入图片描述也可以同时使用WAL流和归档进行备份
在这里插入图片描述

rsync/SSH备份

以下情况时只能使用rsync/SSH备份

  • PostgreSQL服务器版本8.3,8.4,9.0或9.1
  • 使用表空间的PostgreSQL服务器版本9.2或9.3
  • 增量备份，并行备份和重复数据删除
  • 备份期间的网络压缩
  • 更好地控制带宽使用，包括基于表空间
    在这里插入图片描述
    从PostgreSQL 9.2开始，您可以添加用于WAL流的流复制连接，并显着减少RPO，如下图
    在这里插入图片描述
xtrabackup备份原理及流式备份应用
微赚淘客系统开发者博客
11-06 771
目录 xtrabackup备份原理及流式备份应用 0. 参考文献 1. xtrabackup 安装 2. xtrabackup 备份和恢复原理 2.1 备份阶段（backup） 2.2 准备阶段（prepare） 2.3 恢复（copy-back 或move-back） 3. ...
barman备份的配置使用（备份+恢复）
wx370092877的博客
12-08 4521
前言 上次分享了barman备份的安装部署过程，这次将继续分享一下barman备份恢复工具的使用过程。 barman是目前postgreSQL数据库的比较成熟的一款备份工具，是基于postgresql的一款物理备份工具。与oracle数据库中的rman较为类似。 其简单的工作原理即为： 物理全备+归档备份（WAL日志备份），从而达到任意时间点的恢复。即恢复全备后，通过指定WAL日志的时间点、LSN等即可恢复到数据库的任意时间点。 barman备份主要分为三类： 1.仅流复制； 2.ssh/rsync; 3.
【PostgreSQL】运维篇——定期备份与恢复策略
thinking_chou的专栏
10-08 2002
定期备份是确保数据安全的重要措施。通过使用pg_dump以及其他备份工具，可以有效地创建和管理PostgreSQL数据库的备份。制定一个清晰的备份计划，定期验证备份文件的可用性，并记录所有备份和恢复的步骤，可以帮助数据丢失或损坏时快速恢复系统。
Postgres流式备份（6）备份和恢复
supermancoke的博客
03-02 1208
备份 定时维护 定时维护，强制执行保留策略、WAL文件管理 Barman如通过rpm安装将自动添加定时配置文件/etc/cron.d/barman，内容如下，设置每分钟进行一次定时维护 # m h dom mon dow user command * * * * * barman [ -x /usr/bin/barman ] && /usr/...
Barman安装及备份PostgreSQL
一只努力的微服务
08-22 3642
barman特点 零数据丢失备份。保证用户在只有一台备份服务器的情况下达到零数据丢失。 与备份服务器合作。允许备份服务器在与主服务器的流式复制不可用时，从barman获取wal文件。 可靠的监控集成。用于监控和创建有关Barman配置状态的报告。 可并行的备份和恢复。以更快的速度执行拷贝，加快了整个备份和恢复过程。 备份目录。允许用户在同一界面中列出、保留、删除、存档和恢复多个完整备份。 支持多...
docker-postgres-backup-local:通过定期备份将PostgresSQL备份到本地文件系统并轮换备份
04-29
基于 ，通过定期的循环备份将PostgresSQL备份到本地文件系统。 通过在POSTGRES_DB设置数据库名称（用逗号或空格分隔），从同一主机备份多个数据库。 支持以下Docker架构： linux/amd64 ， linux/arm64 ， linux/...
Postgres 备份操作
王小工小工历程
02-11 579
通过合理选择备份策略和工具组合，可以构建完整的PostgreSQL数据保护体系。建议至少每月执行一次全量恢复测试，确保备份有效性。
32、PostgreSQL备份管理：Barman工具的使用指南
最新发布
grape的博客
07-24 70
本文详细介绍了如何使用Barman工具进行PostgreSQL数据库的备份与恢复管理。涵盖了Barman的安装配置、备份操作、恢复步骤、保留策略、并行备份等核心内容，帮助用户高效保障数据库安全性和可用性。
postgres物理备份与恢复
treacle田 --love work and life......
04-11 3904
postgres物理备份与恢复 学习环境:centos 6.5 64  数据库:postgres 9.5.1 1冷备份与恢复 文件系统级别的备份是冷备份，需要停止数据库。 1.1操作步骤 (1)停止数据库 pgdb_ctl -D /pgdb/data  stop -m   fast            (2)备份数据库  tar  -jcvf /pgdb/backup/
postgres定时自动备份数据库
宠溺个人学习博客
07-16 1288
使用shell脚本+Cron任务自动执行postgres数据库备份 思路：先创建一个shell脚本，用于备份pgsql数据库，再使用Cron任务，根据自己需求设置定时任务。 环境：centos7+postgres12.2 1.创建一个根据日期来定义备份文件名的脚本： 1. 创建db_backup.sh文件 touch db_backup.sh 2. 赋予777权限 chmod -R 777 db_backup.sh 2.对db_backup.sh文件进行编写脚本： 1.编辑db_bac
Xtrabackup 流备份与恢复
热门推荐
乐沙弥的世界
04-15 1万+
Xtrabackup是MySQL数据库的备份不可多得的工具之一。提供了全备，增备，数据库级别，表级别备份等等。最牛X的还有不落盘的备份，即流备份方式。对于服务器上空间不足，或是搭建主从，直接使用流式备份大大简化了备份后的压缩复制所带来的更多开销。Xtrabackup支持tar格式以及xbstream格式的流备份。本文即是对此展开的相关描述。 1、基于tar格式备份a、备份到本地# innoback
PostgreSQL 备份恢复工具之 Barman
Tony.Dong的专栏
05-31 2779
文章目录Barman 简介 Barman 简介 Barman（Backup and Recovery Manager，备份与恢复管理器）是一个用于 PostgreSQL 数据库灾难恢复的开源管理工具，使用 Python 编写。Barman 使得企业能够执行多个关键业务数据库的远程备份，并且协助 DBA 执行灾难时的数据恢复。 Barman 用于 PostgreSQL 数据库的物理备份，与 Ora...
“流式备份”终结“中转备份”的低效时代：速度、稳定、管理三重突破‌
zkrb777的博客
05-20 298
中转备份如同一个老式仓库，需要开辟临时堆场，用推车将一件件货物从仓库中取出，临时暂存到堆场中，再用推车装上发货车辆，发往目的地。当行业走向“备份即服务”的新范式，那些仍困在中转模式中的企业，或许该思考一个问题：是继续在低效的循环中消耗资源，还是乘上流式技术的直通车？但面对每天新增的TB级数据，传统备份技术如同老旧的传送带，既拖累效率，又暗藏风险。总结来说：开发一套高效的流式备份功能，不仅需要强大的研发实力支撑，还需要长期的技术投入，在已有流式框架的基础上，适配更多的应用类型，才能保持产品的市场竞争力。
XtraBackup的流式备份和远程备份
weixin_41561862的博客
03-13 6979
XtraBackup支持流式备份,将备份以指定的tar或xbstream格式发送到STDOUT，而不是直接将文件复制到备份目录。 XtraBackup不压缩备份案例，命令如下： innobackupex --defaults-file=/etc/my.cnf --no-timestamp --user root --password 123456 --stream=tar /usr/loca...
innobackupex备份以及流备份
eagle89的专栏
04-18 1441
innobackupex
Postgresql的三种备份方式_postgresql备份
2401_84563605的博客
05-16 7411
把这个标志设置为true后，如果在备份期间时有其他事务修改数据库，那么系统会把被修改的数据页在修改前的完整页面都记录到WAL中，而不仅仅是记录页面中的变化的部分。当需要恢复时，我们先恢复文件系统级别的备份，然后重放备份的WAL文件，把系统恢复到之前的某个状态。如果你没有足够的空间，你至少要保存集簇的pg_xlog子目录的内容，因为它可能包含在系统垮掉之前还未被归档的日志。2. 对数据库进行一次文件系统级别的备份。假如你的数据库出现了故障，需要恢复到之前的某个时刻的一致的状态，就需要进行基于时间点的恢复。
mysql等数据库的流式备份XtraBackup
weixin_34163553的博客
05-19 365
https://www.percona.com/software/percona-xtrabackup ...
postgresql 物理备份 barman 之 安装
weixin_30340617的博客
10-08 218
os: ubuntu 16.04 postgresql: 9.6.8 barman: 2.5 ip 规划 192.168.56.101 node1 barman 192.168.56.102 node2 postgresql barman 是2ndquadrant推出的一款 postgresql 开源备份软件，官网介绍的非常强大。 barman 建议...
postgres 主从备份
02-25
### 配置PostgreSQL主从备份 #### 修改主服务器配置文件 为了实现PostgreSQL的主从备份，需先调整主服务器上的`postgresql.conf`文件设置。具体来说，在PG安装目录下的`postgresql.conf`文件中，应取消特定参数前的注释符号（即井号 `#`），并对这些参数进行适当设定[^3]。 例如： ```conf listen_addresses = '*' wal_level = replica max_wal_senders = 10 wal_keep_segments = 64 archive_mode = on hot_standby = on ``` 上述配置允许主节点监听所有地址，并保持足够的WAL日志供备节点追加同步；同时开启热备用功能以便于读取操作可以在副本上执行。 #### 设置主机信任关系 为了让备机能够顺利连接到主机获取数据流复制所需的信息，需要编辑位于`pg_hba.conf`中的访问控制列表，加入一条记录指定允许来自哪个IP范围内的客户端通过何种认证方式接入数据库服务。对于基于主机验证的方式而言，则可以采用如下形式来简化配置过程[^1]: ``` host replication postgres server.example.com/32 trust ``` 此行表示任何来自于`server.example.com`这台机器发起的数据复制请求都将被无条件接受而无需密码校验。 #### 初始化备库环境 完成以上准备工作之后，就可以利用`pg_basebackup`工具创建一个新的物理拷贝作为初始状态的基础了。命令格式通常如下所示[^4]: ```bash pg_basebackup -h 172.16.125.201 -U replica -D /var/lib/pgsql/9.4/data -X stream -P ``` 这条指令会从远程位置(`172.16.125.201`)拉取最新版本的数据集存放到本地路径(`/var/lib/pgsql/9.4/data`)内，并启用持续的日志传输模式(-X stream)，从而确保两份实例之间的一致性和连续性。 #### 启动并监控进程 最后一步是在新建立好的次级站点启动PostgreSQL守护程序，使其进入待命状态准备接收更新通知以及处理查询请求。可以通过查看系统进程中是否存在名为`checkpointer`的服务项确认当前运行状况正常与否[^2]。 ```bash ps aux | grep postgres ``` 如果一切顺利的话，应该可以看到类似于下面这样的输出结果表明存在负责管理检查点机制的工作线程正在积极工作当中: ``` postgres 4809 0.0 0.0 4806 0 11:31 ? 00:00:00 postgres: checkpointer process ```
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值