Linux环境下达梦数据库实时主备+异步备库的搭建

IREULE

已于 2022-10-20 13:35:43 修改

阅读量2.1k

点赞数

CC 4.0 BY-SA版权

文章标签：数据库 linux 服务器

于 2022-10-18 11:31:40 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_61878106/article/details/127384442

前言

实时主备
达梦数据库实时主备的原理是主库修改数据产生的REDO日志, 通过实时归档机制, 在写入本地REDO之前发送给备库,备库接收到REDO后重新应用REDO日志来保持与主库数据同步，当主库故障时, 备库再将所有REOD日志应用完成后,就切换为主库对外提供服务。

异步备库
在实际应用中，如果数据库规模很大，并且对数据的实时性要求不是很严格，则可以配置多个异步备库用于分担统计报表等任务。

异步备库支持多源配置，目的是在实时或即时主备环境中，当主备库切换或者主库故障时，备库接管以后可以继续向同一个异步备库同步数据，因此如果主库配置了异步备库，在所有备库上也需要配置相同的异步备库，备库只有在切换为主库时才会向其同步数据。

一、环境准备

1.1创建虚拟机

搭建实时主备+异步备库需要准备3台服务器，一台主库服务器，一台异步备库服务器，一台实时备库服务器，备库服务器也作为监视器服务器使用，3台服务器都需要安装有DM数据库软件。

1.1.1 IP地址规划

主库 IP: 192.168.10.112 实例名 its1 数据库名称 its

实时备库 IP: 192.168.10.113 实例名 its2 数据库名称 its

异步备库 IP: 192.168.10.114 实例名 its3 数据库名称 its

1.1.2 端口规划

   MAL_INST_PORT       5236      数据库实例监听端口

   MAL_PORT            61141     MAL 系统监听 TCP 连接的端口

   MAL_DW_PORT         33141     实例监听守护进程 TCP 连接的端口

   MAL_INST_DW_PORT     52141     实例本地的守护进程监听 TCP 连接的端口

1.1.3 目录规划

数据库软件安装目录 /home/dmdba/dmdbms
实例安装目录 /home/dmdba/dmdata
归档日志存放目录 /home/dmdba/dmarch
备份文件存放目录 /home/dmdba/dmbak

1.1.4 前期准备

用户与组

DM 数据库不应该使用 root 用户安装和维护。需要在安装之前为 DM 数据库创建一个专用的系统用户 (dmdba) 和用户组(dinstall)，并设置系统用户dmdba的密码。

在这里插入图片描述

关闭防火墙

查看防火墙状态，如果显示为active，需要关闭防火墙，禁用则开机不启动防火墙。

systemctl status firewalld.service
systemctl stop firewalld.service
systemctl disable firewalld.service

关闭SELinux

查看是否开启了SELinux，如果显示为Enforcing，需要改为Disabled，再重启系统使配置生效。

getenforce
vi /etc/selinux/config
#进入文件后修改 SELINUX = disabled
#保存退出文件
reboot

二、数据库软件安装(三个节点相同操作)

1.命令行形式安装

进入达梦软件挂载目录，执行./DMInstall.bin -i 命令
在这里插入图片描述

按照要求使用root用户执行脚本
在这里插入图片描述

2.初始化数据库实例

1、主库

[dmdba@k8s112 bin]$ ./dminit PATH=/home/dmdba/dmdata db_name=its instance_name=its1

2、实时备库

 [dmdba@k8s113 bin]$ ./dminit PATH=/home/dmdba/dmdata db_name=its instance_name=its2

2、异步备库

 [dmdba@k8s114 bin]$ ./dminit PATH=/home/dmdba/dmdata db_name=its instance_name=its3

在这里插入图片描述

3.前台启动各个实例,启动后关闭

1、主库

[dmdba@k8s112 bin]$ ./dmserver /home/dmdba/dmdata/its/dm.ini

2、实时备库

[dmdba@k8s113 bin]$ ./dmserver /home/dmdba/dmdata/its/dm.ini

2、异步备库

[dmdba@k8s114 bin]$ ./dmserver /home/dmdba/dmdata/its/dm.ini

在这里插入图片描述

4.主库进行脱机备份

脱机备份前要关闭数据库实例，否则备份会出错

[dmdba@k8s112 bin]$ ./dmrman
dmrman V8
RMAN> BACKUP DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ FULL BACKUPSET ‘/home/dmdba/dmbak/full_database’;

在这里插入图片描述

5.实时备库与异步备库进行数据恢复

1、主库复制备份文件到实时备库与异步备库

[dmdba@k8s112 bin]$ scp -r /home/dmdba/dmbak/full_database
192.168.10.113:/home/dmdba/dmbak/

[dmdba@k8s112 bin]$ scp -r /home/dmdba/dmbak/full_database
192.168.10.114:/home/dmdba/dmbak/

在这里插入图片描述

2、实时备库与异步备库进行恢复

[dmdba@k8s113 bin]$ ./dmrman

dmrman V8

RMAN> RESTORE DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ FROM BACKUPSET ‘/home/dmdba/dmbak/full_database’;

RMAN> RECOVER DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ FROM BACKUPSET ‘/home/dmdba/dmbak/full_database’;

RMAN> RECOVER DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ UPDATE DB_MAGIC;

[dmdba@k8s114 bin]$ ./dmrman

dmrman V8

RMAN> RESTORE DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ FROM BACKUPSET ‘/home/dmdba/dmbak/full_database’;

RMAN> RECOVER DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ FROM BACKUPSET ‘/home/dmdba/dmbak/full_database’;

RMAN> RECOVER DATABASE ‘/home/dmdba/dmdata/its/dm.ini’ UPDATE DB_MAGIC;

在这里插入图片描述

三、配置文件设置

1.实例配置文件 dm.ini

使用 dmdba 用户，执行以下命令，分别修改相应参数值。

 vi /home/dmdba/dmdata/its/dm.ini

主库：

INSTANCE_NAME = its1  #修改实例名
MAL_INI = 1            #打开 MAL 系统
ARCH_INI = 1           #打开归档配置
TIMER_INI = 1          #打开定时器配置，除异步备库外的主备库需要
ALTER_MODE_STATUS = 0  #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2  #不允许备库 OFFLINE 表空间

实时备库：

INSTANCE_NAME = its2
MAL_INI = 1
ARCH_INI = 1
TIMER_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

异步备库：

INSTANCE_NAME = its3
MAL_INI = 1   
ARCH_INI = 1 
ALTER_MODE_STATUS = 0  
ENABLE_OFFLINE_TS = 2

2.归档配置文件 dmarch.ini

在实例目录下新建文件 dmarch.ini，使用 dmdba 用户，执行命令，添加内容。

vi /home/dmdba/dmdata/its/dmarch.ini

主库：

[ARCHIVE_REALTIME]
ARCH_TYPE     = REALTIME  #实时归档类型
ARCH_DEST     = its2   #实时归档目标实例名（主库侧填写实时备库实例名）
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL     #本地归档类型
ARCH_DEST     = /home/dmdba/dmarch #本地归档文件存放路径
ARCH_FILE_SIZE    = 128   #单位 MB，本地单个归档文件最大值
ARCH_SPACE_LIMIT  = 0     #单位 MB，0 表示无限制，范围 1024~4294967294 MB
[ARCHIVE_ASYNC]
ARCH_TYPE     = ASYNC     #异步归档类型
ARCH_DEST     = its3  #异步归档目标实例名（主库侧填写异步备库实例名）
ARCH_TIMER_NAME   = RT_TIMER  #定时器名称，和 dmtimer.ini 中的名称一致

实时归档只允许配置一个，即时归档可以配置1-8个，异步归档可以配置1-8个。

实时备库：

[ARCHIVE_REALTIME]
ARCH_TYPE     = REALTIME
ARCH_DEST     = its1
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL
ARCH_DEST     = /home/dmdba/dmarch
ARCH_FILE_SIZE    = 128
ARCH_SPACE_LIMIT  = 0
[ARCHIVE_ASYNC]
ARCH_TYPE     = ASYNC
ARCH_DEST     = its3
ARCH_TIMER_NAME   = RT_TIMER

实时备库也需要配置异步归档，这样切换主备后，异步备库仍然可以使用。

异步备库：

[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL
ARCH_DEST     = /home/dmdba/dmarch
ARCH_FILE_SIZE    = 128
ARCH_SPACE_LIMIT  = 0

异步备库只需要配置本地归档即可。

3.MAL系统配置文件 dmmal.ini

在实例目录下新建文件 dmmal.ini，使用 dmdba 用户，执行以下命令：

vi /home/dmdba/dmdata/its/dmmal.ini

主库、实时备库、异步备库：

添加以下内容，注意修改实例名、IP和端口。

MAL_CHECK_INTERVAL   = 5  # MAL链路检测时间间隔
MAL_CONN_FAIL_INTERVAL  = 5  # 判定 MAL链路断开的时间
[MAL_INST1]
  MAL_INST_NAME = its1  #与 dm.ini中的 INSTANCE_NAME一致
  MAL_HOST     = 192.168.10.112  # MAL系统监听 TCP 内部网络 IP
  MAL_PORT     = 61141  # MAL系统监听 TCP连接的端口
  MAL_INST_HOST   = 192.168.10.112  #实例的对外服务 IP地址
  MAL_INST_PORT   = 5236  #与 dm.ini中的 PORT_NUM一致
  MAL_DW_PORT   = 52141  #实例对应的守护进程监听 TCP 端口
  MAL_INST_DW_PORT = 33141
[MAL_INST2]
  MAL_INST_NAME = its2  #与 dm.ini中的 INSTANCE_NAME 一致
  MAL_HOST      = 192.168.10.113  # MAL系统监听 TCP内部网络 IP
  MAL_PORT          = 61141  # MAL系统监听 TCP连接的端口
  MAL_INST_HOST         = 192.168.10.113  #实例的对外服务 IP地址
  MAL_INST_PORT         = 5236  #与 dm.ini中的 PORT_NUM一致
  MAL_DW_PORT  = 52141  #实例对应的守护进程监听 TCP端口
  MAL_INST_DW_PORT = 33141
[MAL_INST3]
  MAL_INST_NAME = its3
  MAL_HOST = 192.168.10.114
  MAL_PORT  = 61141
  MAL_INST_HOST = 192.168.10.114
  MAL_INST_PORT = 5236
  MAL_DW_PORT = 52141
  MAL_INST_DW_PORT = 33141

主库、实时备库、异步备库的文件内容都要相同。

4.守护进程配置文件 dmwatcher.ini

在实例目录下新建文件 dmwatcher.ini，使用 dmdba 用户，执行以下命令：

vi /home/dmdba/dmdata/its/dmwatcher.ini

主库、实时备库：

[GRP_RW] 
DW_TYPE    = GLOBAL  #全局守护类型
DW_MODE    = AUTO  #自动切换模式
DW_ERROR_TIME     = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME  = 60  #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME   = 10  #本地实例故障认定时间
INST_OGUID         = 453331  #守护系统唯一 OGUID 值
INST_INI           = /home/dmdba/dmdata/its/dm.ini  # dm.ini 配置文件路径
INST_AUTO_RESTART  = 1   #打开实例的自动启动功能
INST_STARTUP_CMD   = /home/dmdba/dmdbms/bin/dmserver  #命令行方式启动

主库、实时备库的文件内容都要相同。

异步备库：

[GRP_RW]
DW_TYPE    = LOCAL  #本地守护类型
DW_MODE    = MANUAL  #手动切换模式
DW_ERROR_TIME     = 10
INST_ERROR_TIME   = 10
INST_OGUID         = 453331
INST_INI           = /home/dmdba/dmdata/its/dm.ini
INST_AUTO_RESTART  = 1
INST_STARTUP_CMD   = /home/dmdba/dmdbms/bin/dmserver

注意组名和 OGUID 要一致。

异步备库不具备故障自动切换等功能，DW_MODE 配置并不起作用，此处配置为 MANUAL 即可。

5.定时器配置文件 dmtimer.ini

在实例目录下新建文件 dmtimer.ini，使用 dmdba 用户，执行以下命令：

vi /home/dmdba/dmdata/its/dmtimer.ini

用于定时触发实例发送归档日志到异步备库。

主库、实时备库：

[RT_TIMER]  #和 dmarch.ini 中的 ARCH_TIMER_NAME 一致
TYPE = 2
FREQ_MONTH_WEEK_INTERVAL = 1
FREQ_SUB_INTERVAL = 0
FREQ_MINUTE_INTERVAL = 0
START_TIME = 00:01:00
END_TIME = 23:59:00
DURING_START_DATE = 2022-7-26 16:00:00
DURING_END_DATE = 9999-12-31 23:59:59
NO_END_DATE_FLAG = 1
DESCRIBE = RT_TIMER
IS_VALID = 1

此处定时器配置为每天 00:01:00 触发主库和实时备库发送归档日志到异步备库，起始日期时间是 2022-07-26 的 16:00 。具体可以根据实际情况再做调整。

异步备库： 不需要配置。

6.监视器配置文件 dmmonitor.ini

集群任意节点（一般在备库），配置监视器配置文件 dmmonitor.ini。
本文配置在实时备库服务器上。

实时备库：

vi /home/dmdba/dmdata/its/dmmonitor.ini

添加以下内容：

MON_DW_CONFIRM    = 1   #确认监视器模式
MON_LOG_PATH    = /home/dmdba/dmdata/dmmonitor_auto/log #监视器日志文件存放路径
MON_LOG_INTERVAL  = 60 #每隔 60 s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE   = 32 #每个日志文件最大 32 MB
MON_LOG_SPACE_LIMIT  = 0  #不限定日志文件总占用空间
[GRP_RW] 
 MON_INST_OGUID    = 453331 #组 GRP_RW 的唯一 OGUID 值
#以下配置为监视器到组 GRP_RW 的守护进程的连接信息，以“IP:PORT”的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
 MON_DW_IP     = 192.168.10.112:52141
 MON_DW_IP     = 192.168.10.113:52141
 MON_DW_IP     = 192.168.10.114:52141

四、启动主备集群

1.启动数据库实例

使用 dmdba 用户，到数据库安装目录的 bin 下执行以下命令。（主库、实时备库、异步备库都执行）

./dmserver /home/dmdba/dmdata/its/dm.ini mount

在这里插入图片描述

另外开一个新的终端，使用 disql 工具连接数据库。

主库：

cd /home/dmdba/dmdbms/bin
./disql SYSDBA/SYSDBA

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(453331);      #修改 oguid
SQL> alter database primary;    #修改为 primary 模式
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

实时备库、异步备库：

cd /home/dmdba/dmdbms/bin
./disql SYSDBA/SYSDBA

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(453331);      #修改 oguid
SQL> alter database standby;    #修改为 standby 模式
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

在这里插入图片描述

2.启动守护进程

dmdba 用户下，到数据库安装目录的 bin 下执行。（主库、实时备库、异步备库都执行）守护进程启动后，会将 Mount 的实例 Open。

./dmwatcher /home/dmdba/dmdata/its/dmwatcher.ini

在这里插入图片描述

3.启动监视器

dmdba 用户下，到数据库安装目录的 bin 下执行。

实时备库：

cd /home/dmdba/dmdbms/bin
./dmmonitor /home/dmdba/dmdata/dmrw/dmmonitor.ini

在这里插入图片描述

五、验证数据同步

1.主库和实时备库数据同步

主库：使用 disql 客户端登录**，创建测试表，插入数据。

./disql SYSDBA/SYSDBA

SQL> create table test(id int, name varchar2(20));
SQL> insert into test values (1, 'one');
SQL> select * from test;
SQL> commit;

在这里插入图片描述

实时备库：使用 disql 客户端登录，查询测试表验证。

./disql SYSDBA/SYSDBA
SQL> select * from test;

在这里插入图片描述

如果主库插入/更改数据后未提交（commit），在备库查询时，仍然会是未插入/更改之前的数据。直到主库提交后，才会使主备库数据同步，此时再次查询备库的表数据，两边数据一致。

2.异步备库定时同步数据

1.查看主库、实时备库设置的dmtimer.ini，定时器设置的时间是：00:001:00。

cat /home/dmdba/dmdata/its/dmtimer.ini
在这里插入图片描述
异步备库：使用 disql 客户端登录，查询测试表验证。

./disql SYSDBA/SYSDBA
SQL> select * from test;

在这里插入图片描述
监视器：输入 show arch send info 命令查看异步备库的归档日志接收信息。

show arch send info its3

在这里插入图片描述