讲师中心 微信公众号
AI工具推荐 视频效率加速

Redis 5.0主从复制优化_利用更高效的缓冲区管理减少全量复制概率

落枫同学_6704

落枫同学_6704

发布时间:2026-05-23 11:42:47

|

950人浏览过

|

来源于php中文网

原创

调大 repl-backlog-size 后全量复制增多,是因为 repl-backlog-ttl 默认为0导致旧数据堆积、挤占新命令空间,使从节点所需偏移量被覆盖;应设合理 ttl(如3600)并按写入速率×断连时间估算 size。

redis 5.0主从复制优化_利用更高效的缓冲区管理减少全量复制概率

为什么 repl-backlog-size 调大后全量复制反而变多了?

调大 repl-backlog-size 本意是延长从节点断线重连时的增量同步窗口,但实际中常出现调大后全量复制更频繁——根本原因是缓冲区虽大,但 repl-backlog-ttl 默认为 0(永不过期),导致 backlog 持续累积旧数据,挤占新写入命令的空间。Redis 5.0 的复制积压缓冲区是环形结构,一旦新写命令覆盖了从节点所需的偏移量范围,就会触发全量同步。

  • 检查当前 backlog 使用情况:INFO replication 中关注 repl_backlog_active、repl_backlog_size、repl_backlog_first_byte_offset 和 repl_backlog_histlen
  • repl-backlog-ttl 应设为合理值(如 3600),避免无效数据长期驻留;该参数在 Redis 5.0+ 才生效,低版本需靠 size + 主动监控控制
  • 真正决定能否增量同步的是:从节点断连期间主节点写入量是否超过 repl_backlog_histlen,而非 repl-backlog-size 的绝对值

如何估算合理的 repl-backlog-size?

不能拍脑袋设 100MB,要基于主节点的写入速率和从节点可能的最长断连时间来算。Redis 5.0 不提供内置写入速率统计,得靠外部观测或 INFO commandstats 估算 QPS 再结合平均命令大小反推字节数。

  • 用 redis-cli --stat 在高峰期观察每秒写入流量(单位 KB/s)
  • 假设峰值写入为 2MB/s,预期从节点最多断连 60 秒,则最小 backlog 需 ≥ 2 × 1024 × 60 ≈ 120MB
  • 再上浮 30% 容错,设为 160MB;同时确认 repl-backlog-ttl 设为 3600,防止长期空载导致 buffer 膨胀却无实效
  • 注意:过大的 backlog 会占用主节点内存且不释放(即使没数据),对内存敏感场景要权衡

主从断连后到底走 PSYNC 还是 FULLRESYNC?

Redis 5.0 默认使用 PSYNC2 协议,但能否成功增量同步,取决于三个条件是否同时满足:从节点上报的 run_id 与主节点一致、上报的 offset 在当前 backlog 有效范围内、主节点 backlog 未被重置(如执行了 DEBUG RELOAD 或重启)。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 查看从节点日志中是否出现 Connecting to MASTER 后紧跟 MASTER REPLICA sync: receiving streamed RDB —— 这是全量复制的明确信号
  • 若看到 Partial resynchronization not possible (no cached master),说明主节点已丢失该 run_id 的上下文,常见于主节点重启或手动 CONFIG SET repl-backlog-size 0
  • 从节点执行 ROLE 可查当前复制状态;主节点执行 ROLE 可看有哪些从节点及它们的 offset 偏移量

哪些操作会意外清空 repl-backlog?

除了主节点重启,以下操作也会让 backlog 彻底失效,导致下一次重连必走全量:

  • 执行 CONFIG SET repl-backlog-size 0(哪怕之后再调大,旧 backlog 已丢)
  • 主节点执行 DEBUG RELOAD(加载 RDB 时重置复制状态)
  • 手动 SLAVEOF NO ONE 将主节点降级为独立实例(backlog 被清空)
  • 注意:CONFIG REWRITE 不影响 backlog,但修改配置后未持久化,重启仍会丢失

backlog 是内存中的运行时结构,不落盘。所有依赖它的增量同步逻辑都建立在“主节点持续在线且配置稳定”的前提上,这点容易被忽略。

热门AI工具

更多
咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4329

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

3835

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

6972

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

623

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

736

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

6642

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1160

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1036

2024.04.07

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

0

2026.10.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn