4.redis-主从复制

01-主从复制概述

• 单机redis存在的问题

  • ①硬盘故障, 导致数据丢失, redis不好用;
  • ②内存容量受限制, 单台服务器内存扩展有上限, 内存数据超过该上线, 该如何处理.

• 解决方案

  • 

  • 1个master可以有多个slave, 1个slave只能对应1个master

  • master: 主机, 可以读也可以写, 主要负责写.

  • slave: 从机, 只能读.

  • 保证master和slave数据同步.

• 主从复制

  • 将master中的数据实时地, 有效地同步到从机.

• 好处

  • 读写分离: master只负责写, slave只负责读
  • 负载均衡: 多台redis服务器分担客户端负载
  • 故障恢复: master宕机, 由slave提供服务
  • 数据冗余: 数据备份到多台redis服务器
  • 高可用: 是哨兵和集群的基础

02-主从复制搭建及演示

• 需求

  • 搭建1主1从的结构

• 配置说明

  #从机的配置文件
  slaveof 主机ip 主机port
  

• ①master配置文件

  port 6379
  daemonize no
  # logfile "log-6379.log"
  maxclients 100000
  timeout 0
  loglevel debug
  
  # RDB设置
  # 1.设置rdb文件名
  dbfilename "dump-6379.rdb"
  
  # 2.设置rdb文件存储路径
  dir /usr/local/redis-6379/data
  
  # 3.设置存储rdb时是否压缩数据
  rdbcompression no
  
  # 4.设置读写文件过程是否进行RDB格式校验
  rdbchecksum no
  
  # 5.后台存储过程中如果出现错误现象，是否停止保存操作
  stop-writes-on-bgsave-error yes
  
  # 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令
  save 10 2
  
  # AOF设置
  # 1.开启aof持久化功能
  appendonly yes
  # 2.设置aof文件名
  appendfilename 'appendonly-6379.aof'
  # 4.设置aof策略
  appendfsync everysec
  
  # 5.当前aof文件大小达到64mb，自动触发AOF重写
  auto-aof-rewrite-min-size 64mb
  # 5.当前aof文件大小比之前aof文件大小增加了100%，自动触发AOF重写
  auto-aof-rewrite-percentage 100
  
  protected-mode no
  

• ②slave配置文件

  port 26379
  daemonize no
  # logfile "log-26379.log"
  maxclients 100000
  timeout 0
  loglevel debug
  
  # RDB设置
  # 1.设置rdb文件名
  dbfilename "dump-26379.rdb"
  
  # 2.设置rdb文件存储路径
  dir /usr/local/redis-26379/data
  
  # 3.设置存储rdb时是否压缩数据
  rdbcompression no
  
  # 4.设置读写文件过程是否进行RDB格式校验
  rdbchecksum no
  
  # 5.后台存储过程中如果出现错误现象，是否停止保存操作
  stop-writes-on-bgsave-error yes
  
  # 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令
  save 10 2
  
  # AOF设置
  # 1.开启aof持久化功能
  appendonly yes
  # 2.设置aof文件名
  appendfilename 'appendonly-26379.aof'
  # 4.设置aof策略
  appendfsync everysec
  
  # 5.当前aof文件大小达到64mb，自动触发AOF重写
  auto-aof-rewrite-min-size 64mb
  # 5.当前aof文件大小比之前aof文件大小增加了100%，自动触发AOF重写
  auto-aof-rewrite-percentage 100
  
  protected-mode no
  
  #主机ip和主机port
  slaveof 192.168.199.110 6379
  

• ③启动主机

  • 

• ④启动从机

  • 

• ⑤演示主从结构

  • 分别使用redis客户端链接主机和从机操作读写指令.

03-主从复制之建立链接阶段

• 建立链接阶段

  • 

• 总结

  • ①master保存了slave的port
  • ②slave保存了master的host和port
  • ③master和slave建立心跳机制(ping/pong)

04-主从复制之数据同步阶段

• 数据同步阶段

  • 

• 总结

  • ①第一次链接, 通过全量复制(RDB)将master的数据备份到slave
  • ②后续的指令, 通过部分复制(AOF)将master的数据备份到slave

05-部分复制的三要素

• 三要素
  • ①服务器运行id(run id)
  • ②主服务器的复制缓冲区
  • ③主从服务器的复制偏移量
• ①服务器运行id(run id)
  • 
• ②主服务器的复制缓冲区
  • 
• ③主从服务器的复制偏移量
  • 从机应该从哪里开始执行部分复制
  • 1个master有多个偏移量, 1个slave有一个偏移量

06-主从复制之命令传播阶段

• 命令传播阶段
  • 当master数据库状态被修改后，导致主从服务器数据库状态不一致，此时需要让主从数据同步到一致 的状态，同步的动作称为命令传播 master将接收到数据变更命令发送给slave，slave接收命令后执行
• 网络出现问题
  • 网络闪断闪连，可以忽略
  • 短时间网络中断，部分复制 (AOF)
  • 长时间网络中断，全量复制(RDB)