Redis主从数据同步原理

原创 已于 2023-07-05 08:56:31 修改 · 203 阅读 · 0 ·
CC 4.0 BY-SA版权
本文为博主原创文章，转载和引用请注明出处。
文章标签：

#redis #数据库 #缓存

于 2023-07-04 15:30:17 首次发布
IT羊资源网介绍了Redis的主从数据同步机制，详细阐述了如何在分布式环境中确保数据一致性。文章探讨了这一关键的IT技术主题，旨在帮助读者理解和实施Redis的复制功能，以优化数据库性能和可靠性。

您的“关注”和“点赞”，是认可，是支持，是动力。

如意见相佐，可留言。
本人必将竭尽全力试图做到准确和全面，终其一生进行修改补充更新。

本文首发在IT羊资源网。
《IT羊资源网》，网址：https://www.ityangzy.com
IT羊资源网是IT世界的羊群！
一个致力于科技、信息技术和计算机领域的综合在线平台。
我们的使命是为读者提供最新、全面的科技资讯、技术教程和资源下载，帮助大家在不断变化的IT领域中保持领先。
欢迎每一位志同道合的人士加入羊群！

【博文首发】

IT羊资源网-Redis主从数据同步原理

Redis主从数据同步原理的详解、以及优化方案
m0_73864806的博客
08-12 1770
简述全量同步和增量同步区别？全量同步：master将完整的内存数据生成RDB，发送RDB到slave。后续命令则记录在repl_baklog逐个发送给slave增量同步：slave提交自己的offest到master，master获取repl_baklog中从offest之后的命令给slave什么时候执行全量同步？slave节点第一次连接master节点时slave节点断开时间太久，repl_baklog中的offset已经被覆盖时什么时候执行增量同步？
Redis主从架构同步原理
码上知新
02-10 1227
有了AOF和RDB，如果Redis发生了宕机，它们可以分别通过回放日志和重新读入RDB文件的方式恢复数据，从而保证尽量少丢失数据，提升可靠性。但是如果Redis实例宕机了，就无法提供服务了。既然⼀台宕机了⽆法提供服务，那多台呢？是不是就可以解决了。Redis 提供了主从模式，通过主从复制，将数据冗余⼀份复制到其他 Redis 服务器。前者称为主节点 (master)，后者称为从节点 (slave)；数据的复制是单向的，只能由主节点到从节点。默认情况下，每台 Redis 服务器都是主节点；
Redis 主从模式同步原理机制
码云仓库地址：https://gitee.com/lance-gyq
10-16 651
Redis主从同步通过日志+状态追踪实现数据一致性，核心机制包括：1）三类元数据（复制偏移量、运行ID、复制积压缓冲区）精准控制同步状态；2）全量同步采用RDB快照+缓存命令确保数据完整对齐；3）增量同步通过实时命令传播保持数据同步；4）异常时自动判断执行增量或全量同步。优化措施包括无盘复制和复制限流，平衡性能与一致性。
Redis主从同步的原理
dayuiicghaid的博客
02-15 429
单节点Redis的并发能力是有上限的，要进一步提高redis的并发能力，就需要搭建主从集群，实现读写分离。一般都是一主多从，主节点负责写数据，从节点负责读数据主从同步有两种同步：1、全量同步：指的是，从节点因为宕机，重启，或新增的从节点等需要从主节点同步全量数据的同步场景2、增量同步：指的是，从节点定时从主节点获取过去一段时间内写入的数据。
Redis主从数据同步原理及优化
weixin_64366370的博客
02-20 815
详解了Redis主从架构的数据同步原理及优化（图片来源黑马程序员，如有侵权必删）
详解Redis主从数据同步原理
lzh804121985的博客
04-22 378
详解Redis主从数据同步方式和原理
Redis主从复制同步原理
hcyxsh的博客
06-23 184
说明：
redis主从同步的原理
m0_63102097的博客
05-22 368
通过同步机制，从节点可以同步主节点的数据，一旦主节点宕机，可以快速切换至从节点提供服务。从节点在接收到 RDB 文件后，会将其载入内存，并继续连接主节点，请求主节点将自上次断开连接后的所有写命令发送给它。：当从节点完成了初始的同步数据后，主节点会加锁，将同步期间主节点执行的所有命令都发送给从节点执行。增量复制：主节点会将自己的命令请求缓存起来，当从节点连接上来的时候，再将缓存的命令请求发送给从节点执行，从节点也从主节点的客户端读取请求并执行。：从节点连接主节点并发送 SYNC 命令请求同步数据。
Redis主从同步原理
慢行的蜗牛
04-23 3336
2.8版本以前 同步(snyc) 执行步骤： 从服务器发送snyc给主服务器 主服务器收到命令后，开始执行bgsave操作，将生成RDB文件，将生成的RDB文件同步给从服务。并使用一个缓冲区记录从现在开始的写命令 从服务载入接受到的RDB文件，期间不可进行其他操作。 主服务将缓冲区里的命令同步给从服务器 传播 同步完成之后，后续的命令都是通过传播的方式发送给从服务器的。即当主服务执行完一条命令后，将该命令发送给从服务，完成数据的同步。 缺陷 场景： 首次复制，不存在问题，毕竟新连接上一个master
Redis 主从复制的原理详解
qq_43197840的博客
09-20 2075
当 Sentinel 发现主节点故障时，会通过选举机制，将其中一个从节点提升为新的主节点，并通知其他从节点重新指向新的主节点。如果从节点与主节点断开连接，当从节点恢复连接后，主节点会将自从连接断开后的增量数据发送给从节点，以保持数据的同步。手动故障恢复：在传统的 Redis 主从复制架构中，当主节点故障时，通常需要人工干预，将其中一个从节点提升为主节点，并重新配置其他节点指向新的主节点。增量复制：在全量复制完成后，从节点会通过命令传播机制，接收主节点的实时写操作日志，并应用到自己的数据集中，实现实时同步。
Redis 主从同步
分享既学习
07-02 1755
在分布式系统中为了解决单点问题，通常会把数据复制到多个副本部署到其它机器，满足故障恢复和负载均衡需求。Redis 也提供了复制功能，实现相同数据多个 Redis 副本。本篇文章介绍如何配置 Redis 复制及原理。本篇文章介绍如何配置 Redis 复制及原理，复制的全量阶段会消耗大量的资源占用网络带宽，因此建议一个 Redis 实例内存不要太大，通常建议不要超过 6GB。可以减少 RDB 文件生成、传输、重新加载的开销。
Redis主从数据同步过程：命令传播、部分重同步、复制偏移量等
程序员-杨胡广的博客
09-09 1129
从服务器使用SYNC进行初次数据同步后，主、从服务器的数据库状态并不是每时每刻都保持一致的，这种情况反而是常态。向主服务器发送心跳检测命令，如果主服务器超过1s没有收到replconf命令，说明主从服务器的网络连接有问题了。这种情况Redis主服务器会将造成主从服务器数据不一致的写命令，即最近执行的写命令，发送给从服务器执行。在心跳检测时的过程中，如果主服务器发现他们的复制偏移量不一致，就会通过该偏移量找到从服务器。后，主从服务器的偏移量就会 + N。从服务器执行命令后，主、从服务器的数据也就同步了。
Redis分布式缓存（持久化、主从集群）
m0_53881899的博客
11-20 287
Redis分布式缓存（持久化、主从集群）
Redisson的multilock原理
最新发布
2401_83708850的博客
11-24 246
Redisson 的 RedissonMultiLock（联合锁）是用来同时持有多把独立锁，从而兼顾多资源一致性的“打包锁”。它的工作原理可以分成“加锁”“释放”“故障处理”三个阶段。
Redis 集群模式优化和备份
小五
11-21 50
本文针对Rocky Linux 9.5系统（16G内存、8核CPU、SSD存储）提出多项调优建议。内存管理方面建议降低vm.swappiness至10，调整脏页写回参数；文件系统建议提高最大文件描述符数；网络参数优化包括增加TCP连接队列和缓冲区大小；CPU调度推荐使用performance模式；I/O子系统建议为SSD选用noop调度器。同时提供了包含内存、网络、安全等参数的完整sysctl配置模板，强调需根据实际负载测试调整参数，并注意过度调优可能导致系统不稳定或影响SSD寿命。
Redis如何设置密码
2509_94006941的博客
11-20 914
为什么redis要设置密码？内网环境可以不设置密码，但是个人服务器，以及线上公网服务器就有必要设置密码了。昨天我查看了一下minio的redis事件通知，查看redis的key时发现多了几个奇怪的key。然后我猜想应该是挖矿病毒。如下面所示：这样就将定时任务和脚本注入到了我们机器当中，就会开始执行 init.sh 脚本backup1 "backup2 "backup3 "backup4 "公网的redis一定要设置密码阿，不要不设置密码，设置密码就一个指令，非常容易，可不要偷懒噢。
Redis（137）Redis的模块机制是什么？
qq_43012298的博客
11-21 978
Redis模块机制允许开发者通过C语言API扩展Redis功能，可添加新命令、数据类型和事件处理器。开发流程包括：包含redismodule.h头文件、定义模块上下文、实现命令处理函数、注册命令以及编译加载模块。示例展示了"hello.world"命令和计数器模块的实现方法，前者返回字符串，后者支持incr/get操作。该机制为Redis提供了灵活的功能扩展能力，开发者可基于此实现更复杂的自定义功能。
Redis重大版本整理(Redis2.6-Redis7.0)
2509_94005872的博客
11-21 579
Redis借鉴了Linux操做系统对于版本号的命名规则：node 版本号第二位若是是奇数，则为非稳定版本（例如2.7、2.9、3.1），若是是偶数，则为稳定版本（例如2.6、2.8、3.0、3.2）。当前奇数版本就是下一个稳定版本的开发版本，例如2.9版本是3.0版本的开发版本，因此咱们在生产环境一般选取偶数版本的Redis。
深入解析Redis主从复制原理与数据同步机制
综上所述，Redis主从复制是一套融合了连接管理、身份验证、数据快照、增量同步、偏移追踪、缓冲区控制及心跳检测等多重技术于一体的复杂而高效的分布式数据同步体系，广泛应用于缓存集群构建、读写分离架构以及故障...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值