postgresql主从流复制搭建

PG学习笔记(1)—— 主从复制:流复制 PG学习笔记(1)—— 主从复制:流复制 闲云野鹤,乡夫俗子,不过一隅静土。 背景 PostgreSQL 9.1之前,主从复制传输以WAL日志文件为单位,主库写完WAL日志后再传输给从库,导致主从延迟较大。基于这种情况,PostgreSQL 9.1引入主从流复制,以WAL日志的record为传输单位,从库及时同步主库数据,并且应用每个WAL record,因此能做到同步复制。另外实现了Hot Standby,从库在应用WAL record的同事能够提供制度服务。 架构 PG主从流复制的核心有三个进程构成: 阅读详情

1 环境

主机:
ip: 192.168.2.169
系统:centos6.5 64bit
数据库版本:postgresql 10.4
数据库安装位置:/opt/pg10.4
从机:
ip: 192.168.2.190
系统:centos6.5 64bit
数据库版本:postgresql 10.4
数据库安装位置:/opt/pg10.4

2 主机设置

修改主机系统参数配置
启动数据库,打开psql。输入下面三条SQL设置参数。

psql (10.4)
Type "help" for help.
postgres=# alter system set wal_level = hot_standby ;
ALTER SYSTEM
postgres=# alter system set max_wal_senders = 3 ;
ALTER SYSTEM
postgres=# alter system set hot_standby = on ;
ALTER SYSTEM
postgres=#

修改pg_hba.conf中的流复制配置
在data目录下的pg_hba.conf文件末尾加上这句话,让从机能访问主机的监听端口。注意:需要关闭防火墙

host replication dba 192.168.2.0/16 md5

3 从机设置

初始化数据库–把主库中的历史数据导入
在数据库bin目录下输入命令
pg_basebackup -D /opt/pg10.4/data -Fp -Xs -v -P -h 192.168.2.169 -p 5432 -U postgres
这里就将主库中的data导过来了,/opt/pg10.4/data在执行这条命令前,应该不存在这个文件目录。

[peter@localhost bin]$ pg_basebackup -D /opt/pg10.4/data -Fp -Xs -v -P -h 192.168.2.169 -p 5432 -U postgres
Password: 
pg_basebackup: initiating base backup, waiting for checkpoint to complete
pg_basebackup: checkpoint completed
pg_basebackup: write-ahead log start point: 0/8000028 on timeline 4
pg_basebackup: starting background WAL receiver
31472/31472 kB (100%), 1/1 tablespace
pg_basebackup: write-ahead log end point: 0/8000130
pg_basebackup: waiting for background process to finish streaming ...
pg_basebackup: base backup completed
[peter@localhost bin]$ 

在/opt/pg10.4/data目录下创建 recovery.conf文件增加如下设置

standby_mode = on #说明这台机器为从机
primary_conninfo = 'host=192.168.2.169 port=5432 user=postgres password=dba$123'

###4 重启数据库
主机、从机都重新启动数据库。

在主机上查询流复制信息
通过sql查询可以看到192.168.2.190也就是从机配置了复制流。

postgres=# select pid,usename,application_name,client_addr,state,client_port,sent_lsn,backend_start ,sync_state from pg_stat_replication;
  pid  | usename  | application_name |  client_addr  |   state   | client_port |
 sent_lsn  |         backend_start         | sync_state 
-------+----------+------------------+---------------+-----------+-------------+
-----------+-------------------------------+------------
 14198 | postgres | walreceiver      | 192.168.2.190 | streaming |       56858 |
 0/A0001B0 | 2019-03-20 23:58:36.580964-07 | async
(1 row)

postgres=# 

###5 复制流的数据测试
在主机上操作

postgres=# create table ttb_02(id int ,name char(12));
CREATE TABLE
postgres=# insert into ttb_02(id,name)values(1,'关羽');
INSERT 0 1
postgres=# insert into ttb_02(id,name)values(3,'张飞');
INSERT 0 1
postgres=# insert into ttb_02(id,name)values(4,'赵云');
INSERT 0 1
postgres=# select * from ttb_02;
 id |      name      
----+----------------
  1 | 关羽          
  3 | 张飞          
  4 | 赵云          
(3 rows)

postgres=# 

查询从机是否同步

postgres=# \dt
         List of relations
 Schema |  Name  | Type  |  Owner   
--------+--------+-------+----------
 public | test   | table | postgres
 public | ttb_02 | table | postgres
(2 rows)

postgres=# select * from ttb_02;
 id |      name      
----+----------------
  1 | 关羽          
  3 | 张飞          
  4 | 赵云          
(3 rows)

postgres=# 

从机不能做写操作
在从机上对数据增删查都是不允许的,会报错

postgres=# create table ttb_03(id int ,name char(12));
ERROR:  cannot execute CREATE TABLE in a read-only transaction
【PostgreSQL】——主从流复制 一、前言 PostgreSQL号称是最先进的开源数据库,对标oracle。不过从使用角度来看,个人认为pg过于学院派了,使用上比较不友好。它的设计理念还是很先进的。我今天写本文主要是从主从的角度聊一下postgreSQL。postgresql 提供了主从复制功能,有基于文件的拷贝和基于 tcp 流的数据传输两种方式。两种方式都是传输 wal 数据,前者是等待生成一个完整的wal文件后,才会触发传输,后者是实时传输的。可以看出来基于文件方式的延迟会比较高,而且wal文件有可能没来得及传输就被损坏了,.. 阅读详情

相关推荐

PostgreSQL-流复制(主从复制)-异步复制

编译安装postgresql。配置归档(主从都要做)

m0_71902491的博客 1377

PostgreSQL主从复制和流复制

主从复制是一种常见的数据库复制技术,它基于一个主数据库和一个或多个从数据库之间的关系。主数据库负责处理所有的写操作,而从数据库负责接收主数据库的写操作并进行重放,从而保持与主数据库的数据一致性。流复制是主从复制的一种形式,它通过网络流的方式将主数据库的修改操作传输给从数据库。流复制相比于基于文件的复制方式具有更低的延迟和更高的性能。从数据库会将这些日志应用到自己的数据库中,从而保持与主数据库的数据一致性。日志发送给从数据库,从数据库将这些日志应用到自己的数据库中,从而实现主数据库和从数据库的数据同步。

互联网知识分享 2478

PostgreSQL主从流复制原理及搭建

Postgresql9开始支持流复制(stream replication),作为pg原生的复制技术,有着很好的性能。本文从几个方面全面介绍pg的流复制技术。 主从部署 Postgresql主从部署比较简单,首先你需要安装好主从两个实例,然后进行主备库配置,主要配置可以参考如下步骤: 主库配置: ①创建角色用于同步: create role replica login replication en...

数据库架构之美 7491

PostgreSQL的主从复制方式

PostgreSQL支持多种主从复制(Master-Slave Replication)方式,用于创建可靠的数据备份和故障容错解决方案。以下是几种常见的主从复制方式:同步复制(Synchronous Replication):在同步复制中,主节点将事务发送到一个或多个从节点,并等待从节点确认写操作已成功应用。只有当所有从节点都完成了写操作之后,主节点才会提交事务,确保数据的一致性。尽管同步复制提供了最高级别的数据保护,但也会对性能造成一定负担。

不积跬步,无以至千里;不积小流,无以成江海。 1315

postgresql主从流复制集群搭建方法

这个命令会返回从主节点复制过来的 WAL 日志的位置(pg_last_xlog_receive_location)和正在 replay 的位置(pg_last_xlog_replay_location),以及最后一个成功 replay 的事务时间戳(pg_last_xact_replay_timestamp)。如果从节点正在接收 WAL 日志并 replay,那么位置和时间戳会不断地更新。如果从节点不再接收新的 WAL 日志,那么位置和时间戳就会停止更新。命令将从主节点复制数据并在从节点上初始化数据目录。

数据龛 685

PostgreSQL物理流复制实战:Ubuntu 20.04高可用主从搭建

物理流复制是PostgreSQL实现高可用的核心机制,其本质是通过WAL(Write-Ahead Logging)日志的二进制块实时同步,保障主备库在数据页级别完全一致。相比逻辑复制的SQL重放和延迟不可控,物理流复制具备毫秒级延迟、零语义损耗与内核级可靠性等技术优势,成为生产环境的事实标准。它广泛应用于金融风控、工业IoT、电商订单等对数据一致性与服务连续性要求严苛的场景。本文基于PostgreSQL 12与Ubuntu 20.04 LTS,详解wal_level、max_wal_senders、stan

weixin_33508411的博客 318

搭建 PostgreSQL 流复制主从指南(适用于 CentOS 7.x)

流复制是 PostgreSQL 提供的一种数据复制机制,它允许从服务器实时接收主服务器的 WAL(Write-Ahead Logging)日志,以保持数据的一致性。流复制有助于提高数据库的高可用性,并能够实现读写分离,提高系统性能。

分享关于Java编程、数据库管理和信息安全方面的最佳实践 1384

保姆级教程:用ROS2 Humble和激光雷达,5分钟搞定机器人避障(附Python代码)

本文提供了一份详细的ROS2 Humble激光雷达避障实战指南,帮助开发者快速实现机器人避障功能。通过环境配置、硬件连接和Python代码实现,5分钟内即可让机器人自主避开障碍物。文章还涵盖了参数调优、常见问题排查及进阶优化技巧,适合机器人开发初学者和进阶用户。

weixin_42528902的博客 343

Postgresql实战:使用pg_basebackup或pg_start_backup方式搭建Postgresql主从流复制

Postgresql实战:使用pg_basebackup或pg_start_backup方式搭建Postgresql主从流复制

lusklusklusk的博客 2843

Oracle19c SYSAUX表空间爆满?手把手教你清理SM/ADVISOR和AUDSYS占用(附完整SQL)

本文详细解析了Oracle19c中SYSAUX表空间爆满的常见原因及解决方案,重点针对SM/ADVISOR和AUDSYS组件的空间占用问题提供了完整的SQL清理脚本。通过诊断查询、空间清理和预防性维护策略,帮助DBA有效管理SYSAUX表空间,确保数据库稳定运行。

weixin_28338005的博客 243

避坑指南:群晖DSM 7.X挂载NTFS硬盘,为什么你的SATA口不行?从原理到实战一次讲清

本文深入解析群晖DSM 7.X系统挂载NTFS硬盘的底层原理与实战排查方法,揭示SATA接口权限配置的关键参数(如esataportcfg和internalportcfg),并提供安全修改端口配置的详细步骤。针对不同型号群晖NAS的配置差异,给出替代方案与常见故障排查技巧,帮助用户解决NTFS硬盘挂载问题。

weixin_26757925的博客 257

postgresql14主从同步流复制搭建

归档目录根据自己的实际情况配置,需要提前检查是否存在wal日志所在目录,我使用版本路径为/var/lib/pgsql/14/data/pg_wal/ 有些版本为/var/lib/pgsql/14/data/wal_archive。5、此时data目录下会出现standby.signal文件,编辑文件。如果使用云服务器,需要配置云服务器的防火墙,开放5432端口号。4. 从主服务器上copy数据到从服务器,基础备份。7. 编辑pg_hba.conf增加从机IP。5. 创建流复制账号。

weixin_41676972的博客 1686

OnlyOffice Docker部署踩坑实录:解决Nginx反向代理导致的editor.bin下载失败

本文详细解析了在Docker中部署OnlyOffice时,因Nginx反向代理配置不当导致editor.bin下载失败的常见问题。通过分析问题根源,提供了从Nginx代理配置、Docker网络设置到OnlyOffice容器内部调整的完整解决方案,并分享了实战调试技巧与性能优化建议,帮助用户彻底解决这一部署难题。

wine的专栏 525

【PostgreSQL】流复制主从集群搭建

前言 最近要给客户部署一套postgresql生产环境,规划是采用一主两从的流复制架构搭建集群。记录本次操作过程及遇到的一些问题,留作参考。 环境 集群配置 主机 角色 OS db 192.168.0.111 主 Ubuntu20 postgresql14 192.168.0.112 备 Ubuntu20 postgresql14 192.168.0.113 备 Ubuntu20 postgresql14

2701

告别Vysor!用Scrcpy在Mac上无线投屏安卓手机(附魅族16th闪退修复实战)

本文详细介绍了如何在Mac上配置和使用开源投屏工具Scrcpy,实现安卓手机无线投屏的高效解决方案。从基础环境准备到高级功能调优,包括无线连接配置、输入控制增强、多设备管理和性能优化等实用技巧,特别针对魅族16th等机型的闪退问题提供了修复方案,帮助用户彻底告别Vysor等商业软件。

weixin_28712661的博客 396

2、MOSFET基本物理效应及其BSIM4模型解析

本文深入探讨了MOSFET的基本物理效应及其在BSIM4模型中的数学表述,涵盖门和沟道的几何结构、温度依赖性、材料模型选项、阈值电压计算、以及其他关键物理效应如LDD电阻、有限电荷厚度、有效迁移率等。同时解析了机械应力、邻近效应及布局依赖效应对MOSFET性能的影响,并通过参数表和建模流程提供了精确建模的指导,旨在帮助读者优化MOSFET器件性能与可靠性。

purple的博客 566

PostgreSQL 流复制实战:从主从搭建到故障切换的完整指南

本文详细介绍了PostgreSQL流复制的完整实战指南,包括主从搭建、故障切换及性能优化等关键步骤。通过配置流复制(Streaming Replication),实现数据库高可用性,避免单点故障导致的数据丢失。文章涵盖环境准备、主从库配置、监控验证及常见问题解决方案,帮助开发者构建稳定可靠的PostgreSQL数据库架构。

weixin_30839881的博客 192

YOLOv11改进 | 模型知识蒸馏篇 | 利用模型蒸馏改进YOLOv11进行无损涨点 | 离线蒸馏(附代码 + 完整文件 + 解析教程)

这篇文章给大家带来的最新改进是模型的蒸馏,利用教师模型指导学生模型从而进行模型的涨点,本文的内容不仅可以用于论文中,在目前的绝大多数的工作中模型蒸馏是一项非常重要的技术,所以大家可以仔细学习一下本文的内容,本文从YOLOv8的项目文件为例,进行详细的修改教程,文章内包括完整的修改教程,针对小白我出了视频修改教程,如果你还不会我提供了修改后的文件大家直接运行即可,所以说不用担心不会适用!模型蒸馏真正的无损涨点,蒸馏你只看这一篇文章就足够了!欢迎大家订阅我的专栏一起学习YOLO!

Snu77的博客 4330

Postgresql主从集群流复制从无到有搭建(windows架构)

Postgresql主从集群流复制从无到有搭建(windows架构) 操作目录1.总体架构:2.环境:3.创建流复制环境搭建: 1.总体架构: 4台windows服务器架构图 2.环境: 1、 WindowsServier (windows10) 2、 postgres12.4 3、 AlwaysUp windows流氓进程开门狗程序 3.创建流复制环境搭建: 1、 安装数据库() ![在这里插入图片描述](https://img-blog.csdnimg.cn/2020082711203590

wangxiang the blog 3488

手把手教你完成YOLOv11分类识别界面搭建,使用Qt6设计YOLOv11分类识别系统,前台系统+后台管理系统开发实战,全网最详细教程

本项目结合YOLOv11分类识别算法和PySide6框架,开发了一套图形化分类识别系统。系统支持图片、视频和摄像头实时分类检测,并具备完善的用户管理功能,包括登录验证、个人信息修改等模块。最新版本新增了管理员后台管理系统,包含用户管理、权限控制等功能。系统采用MySQL数据库存储用户数据,界面设计采用QtDesigner完成,实现了高效的目标分类与友好的交互体验。

在职AI算法工程师,擅长计算机视觉,YOLO目标检测、分割等,擅长web、pyqt界面可视化,好内容持续更新中,来这里跟大家一起学习,共同进步 1055

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面,电脑运行连游戏界面都一样大小,很怀旧,很真实,(英文版)强烈推荐,很小的文件,很难才找到的。

PostgreSQL异步主从流复制搭建

1 总体规划 Master库 Slave库 操作系统 CentOS Linux release 7.5.1804 CentOS Linux release 7.5.1804 处理器 1 1 内存 4G 4G 硬盘 ...

baidang9740的博客 239

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

玩转 PostgreSQL 高可用:手把手搭建主从流复制,附内网穿透远程访问技巧

cpolar是一款安全高效的内网穿透工具,无需公网IP或复杂配置,只需一条命令,即可将本地服务器、Web服务或任意端口映射到公网,让你随时随地远程访问内网应用,特别适合开发调试、远程运维和应急部署等场景。折腾完这套 PostgreSQL 主从架构,其实最大的感触是:开源数据库的高可用方案从来都不是 “高大上” 的玄学,而是把基础配置做扎实、把监控和切换流程捋清楚。这套主从复制 + 内网穿透的组合,我已经在多个中小项目中落地,既能扛住日常的业务压力,又能应对突发的主库故障,关键是成本几乎为零。

Tiam_cr的博客 921

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

PostgreSQL13使用流复制Replication功能搭建主从集群实现读写分离

三台服务器,一主两从。不借助插件或第三方中间件,仅使用PostgreSQL自带的流复制功能。主节点可建库建表、可读写,两个从节点为只读,程序使用时可以通过读写分离减少数据库读写压力。 设置同步复制,为热备份,数据实时同步,对于大多数业务来说,可以认为三个库数据完全相同,当一个库故障时,其他库仍然可提供服务,增加服务可用性。 当主节点故障时,数据无法更新,只能手动将从节点升格为主节点,需要修改服务的数据库连接配置等,服务短暂不可用

闫玉林的博客 5248

PostgreSQL 主从流复制完整部署指南:从零搭建到故障切换

数据库高可用这件事,做与不做,差别在于:做了一切正常时可能觉得多余,但出问题的时候你会庆幸它还在。PostgreSQL 从 9.0 版本开始原生支持流复制机制,主从架构部署成熟稳定,配置链路清晰,是中小企业搭建数据库高可用方案的首选路径之一。流复制的原理不复杂:主库产生 WAL 日志,通过流复制协议实时推送给从库,从库接收后重放日志完成数据同步。主库故障时,从库可以快速提升为主库继续提供服务,整个切换过程业务中断时间可以控制在分钟级别甚至更短。

从事移动开发八年,csdn博客专家,阿里云特邀专家,华为云云享专家,高级网络信息安全工程师,大数据工程师(高级),python技术开发(高级),HarmonyOS 应用开发者高级认证,现在某学校任教。 1万+

PostgreSQL主从流复制完整部署指南:从零搭建到故障切换

数据库高可用这件事,做与不做,差别在于:做了一切正常时可能觉得多余,但出问题的时候你会庆幸它还在。PostgreSQL 从 9.0 版本开始原生支持流复制机制,主从架构部署成熟稳定,配置链路清晰,是中小企业搭建数据库高可用方案的首选路径之一。

专注于 C/C++ 后端开发,涵盖基础语法、Linux系统与网络、MySQL数据库、常见算法及项目经验。 1万+

postgresql-pgpool-流复制主从同步(一)----主从搭建

一 主备机器规划 主机名 IP 角色 端口 master 192.168.0.108 Master 5432 slave 192.168.0.109 Slave 5432 二 创建流复制 2.1 设置host master,slave两节点都要操作。 [root@bogon ~]# vim /etc/hosts #编辑内容如下: 192.168.43.127 master 192.168.43.243 slave 按esc,wq!保存退

qq_38461724的博客 645
上一篇: Linux下配置使用VNC
下一篇: postgresql10.4增量备份
codepeter
博客等级 码龄6年 11粉丝 47原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值