已存大量数据的mysql库实现主从各种报错----解决方案（看评论）

背景

计划对已有大量数据的mysql库的主从搭建，使用了常规先做数据同步，完成首次同步后，再进行主从配置，已失败告终；
过程出现了Error_code:1593、Error_code: 1062、Error_code:1033等主从start启动异常，有的code可以解决，有些code反复出现。耗费大量时间在研究解决问题；
于是思考，是不是方向错了，重新梳理流程，想出一个方案 “先死后生”，理论可以跳过这些问题的出现，觉得可行性很高，实施后，很快就成功了，方案与实施分享如下

何谓“先死后生”

备份后源数据库的数据，弄死源数据库，配置一个全新的主从，将备份的数据恢复到全新主上。

本文使用技术

mysql、docker
本文通篇是用例 docker 容器部署数据库，如果是主机部署数据库，学习思想即可，不需要看查实施过程。

1、实施流程图

2、实施

2.1、数据库备份

步骤一、进入mysql数据库容器
		在宿主机运行命令进行入mysql容器
		docker exec -it [容器id] /bin/bash

步骤二、备份数据库
		按数据库唯度备份，一个库备份一份sql
		mysqldump -u root -p dbname > dbname_backup.sql
		运行完成这条命令会提示输入root的密码

输入密码后，数据多的话，需要耐心待待，数据量大的情况生成备份sql文档是需要一些时间的

上图中生成的autoplat_backup.sql 这个数据库sql文档，如下图

步骤三、从容器中将sql文拷贝出来
退出容器，什么命令?   exit
docker ps 找到mysql容器
然后使用下面命令copy到当前目录下
docker cp [容器id]:/[sql文件路径] ./

有多个数据库就执行多次备份，方式多种多样，可以将多个sql起tar打包再docker cp出来也行
备份操作行告一段落

2.2、搭建Mysql的Master-Slave

2.2.1、准备工作

先准备三个文件
一个docker compose的mysql编排文件， 主从两个mysql的 my.cnf配置文件
如果不会docker compose的请先刷docker compose部署容器的文档：
【暂略】

1、编排文件mysql.yaml（主从都用这个部署）

version: '3'
services:
  mysql:
    restart: always
    image: mysql:5.7.38
    container_name: mysql-master   # master 、slave
    volumes:
      - /data/apps/mysql/mydir:/mydir
      - /data/apps/mysql/datadir:/var/lib/mysql
      - /data/apps/mysql/conf/my.cnf:/etc/my.cnf
      - /data/apps/mysql/source:/docker-entrypoint-initdb.d
    environment:
      - "MYSQL_ROOT_PASSWORD=qwer1234"
      - "MYSQL_DATABASE=testdb"
      - "TZ=Asia/Shanghai"
    ports:
      - 3306:3306

2、master my.cnf

#master节点的配置
[mysqld]
server-id=1    #设置服务id，需全局唯一　　
log-bin=/var/lib/mysql/mysql-bin  #加入binlog配置，供从库读取　　#binlog-do-db =test
binlog-ignore-db=mysql
binlog-ignore-db=sys
binlog-ignore-db=performance_scheme
binlog-ignore-db=information_scheme
binlog_format=row

3、slave my.cnf

slave节点的配置
[mysqld]
server-id=2    #设置服务id，需全局唯一　　
log-bin=/var/lib/mysql/mysql-bin  #加入binlog配置，供从库读取　　#binlog-do-db =test
binlog-ignore-db=mysql
binlog-ignore-db=sys
binlog-ignore-db=performance_scheme
binlog-ignore-db=information_scheme
binlog_format=row

2.2.2、开始部署

• 1、配置my.cnf

  在主从上按照compose的my.cnf 目标创建一个目录

mkdir -p /data/apps/mysql/conf/

然后将my.cnf文档放到这个目录，注意主从对应放，别放反了

• 2、运行容器

  在master服务器上将mysql_master.yaml（这个里面内容与slave的内容一样，只是yaml名称不一样）放到某个目录下，进入到这个目录，运行命令
  docker compose -f mysql_master.yaml up -d
  如下图，运行成功
  
  在slave服务器上将mysql.yaml放到某个目录下，进入到这个目录，运行命令
  docker compose -f mysql.yaml up -d
  如下图，运行成功
  

2.2.3、账号配置

master 创建同步账号

# 创建一个账号，%为任意ip能访问，可以指定ip，在%号添加IP即可，多IP，以逗号确认
create user 'slave'@'%' identified by "qwer1234";

#给所有库与表的所有权限
GRANT ALL PRIVILEGES ON *.* TO 'slave'@'%';

#配置成功
FLUSH PRIVILEGES;

2.2.4、slave 同步配置

slave配置同步账号

stop slave;

CHANGE MASTER TO MASTER_HOST = '172.17.0.2', MASTER_USER = 'slave', MASTER_PASSWORD = 'qwer1234', MASTER_PORT = 3306, MASTER_RETRY_COUNT = 0, MASTER_HEARTBEAT_PERIOD = 10000;

start slave;

2.2.5、验证

在master中建一个库一个表，检查slave中是否也同步有了这个表

2.3、Master做数据恢复

1、建恢复库
库名称需要与备份时的一样
响应2.1 步骤二的备份，需要在master上建一个autoplat库

2、导致备份sql文件
使用docker cp 将autoplat_backup.sql文件导致master mysql容器
docker cp autoplat_backup.sql [容器id]:/

进入到master的容器

docker exec -it [容器id] /bin/bash
#运行恢复命令，会弹出mysql root账号的密码确认，输入密码，回归
mysql -u root -p autoplat < autoplat_backup.sql
#恢复需要一会，数据越多，越久，需要耐心

3、进入到master检查 autoplat数据
可见数据已经恢复

4、进入slave机器看数据同步
可见已经同步

结语

过程很艰辛，但成功的喜悦让嘴解始终压不住