讲师中心 微信公众号
AI工具推荐 视频效率加速

如何解决Redis因系统Dirty Page过多造成的fsync阻塞

云明君_8109

云明君_8109

发布时间:2026-11-06 10:40:28

|

345人浏览过

|

来源于php中文网

原创

根本原因是Linux内核page cache刷盘机制被拖慢:dirty page过多或磁盘I/O饱和时,fsync()需等待脏页落盘而阻塞数秒,导致Redis后台线程卡住、主线程延迟飙升,并触发aof_delayed_fsync持续增长。

如何解决redis因系统dirty page过多造成的fsync阻塞

Redis 的 fsync 阻塞根本原因不是 Redis 自身,而是 Linux 内核的 page cache 刷盘机制被拖慢——当系统 dirty page 过多、刷盘不及时,appendfsync everysec 的后台线程就会卡在 fsync() 系统调用上,进而拖累主线程响应。

为什么 fsync 会卡住:Linux dirty page 机制的真实表现

Redis 启用 AOF + appendfsync everysec 时,写命令先落 write(2) 到 page cache,再由后台线程每秒调一次 fsync() 强制刷盘。但 fsync() 实际要等内核把对应 page cache 中的 dirty 数据真正写入磁盘。如果系统 dirty page 总量太大(比如 /proc/sys/vm/dirty_ratio 接近 20%),或磁盘 I/O 持续饱和(HDD 尤其明显),fsync() 就会阻塞数秒甚至更久。

此时 Redis 日志里会出现:

* Asynchronous AOF fsync is taking too long (disk is busy?). Writing the AOF buffer without waiting for fsync to complete...

这不是 Redis 在“异步”,而是它被迫放弃等待——后续写操作继续往 buffer 塞,但 buffer 积压会导致内存上涨、延迟飙升,严重时触发 OOM killer。

Sentinal Redis
Sentinal Redis

监控Redis服务器健康状况、内存、性能及BullMQ队列。检查队列深度、失败任务,分析慢查询并诊断问题。

下载

vm.dirty_ratio 和 vm.dirty_background_ratio 必须调低

默认值(如 dirty_ratio=20)对 Redis 这类高频小写场景极不友好。一旦 page cache 占满物理内存 20%,内核会强制同步刷盘,所有 fsync() 调用都会被 block。

  • vm.dirty_background_ratio 设为 5:当 dirty page 达到内存 5% 时,内核自动启动后台刷盘线程(pdflush 或 writeback),避免堆积
  • vm.dirty_ratio 设为 10:作为硬上限,防止突发写入打爆内存;高于此值,write(2) 也会被阻塞(不只是 fsync)
  • 修改后需运行 sysctl -p 生效,且建议加到 /etc/sysctl.conf 永久生效

AOF 配置必须配合内核参数调整

只调内核参数不改 Redis 配置,效果有限;只改 Redis 配置不调内核,等于治标不治本。

  • 确认 appendfsync 是 everysec(不是 always,否则每次写都卡主线程;也不是 no,丢失数据风险高)
  • 开启 no-appendfsync-on-rewrite yes:AOF 重写期间暂停 fsync,避免重写 + 刷盘双重压力
  • 禁用 linux-kernel-transparent-hugepage:hugepage 会加剧 dirty page 分配和回收延迟,执行 echo never > /sys/kernel/mm/transparent_hugepage/enabled
  • 避免在 Redis 机器上跑其他高 IO 进程(如备份脚本、日志轮转),它们会抢占 writeback 资源

如何验证是否真由 dirty page 导致

别只看 Redis 日志,直接查内核状态:

  • 实时看 dirty page 占比:cat /proc/meminfo | grep -i dirty,关注 Dirty: 和 Writeback: 行
  • 看刷盘压力:cat /proc/vmstat | grep -E "pgpgout|pgpgin|pswpout|pswpin|pgmajfault",若 pgpgout 持续 > 50MB/s 且 Writeback 长时间不降,说明刷盘已跟不上
  • 检查磁盘实际 util:iostat -x 1,观察 %util 是否长期 > 90%,await 是否 > 50ms(HDD 场景常见)
  • 对比 INFO PERSISTENCE 中 aof_delayed_fsync 计数器——该值持续增长,就是 fsync 被迫跳过的铁证

真正棘手的是:这些参数之间存在隐式耦合。比如调低 dirty_ratio 后,若磁盘本身太慢(如老旧 HDD),writeback 线程仍会积压,只是从“全卡死”变成“缓慢爬行”。这时候换 SSD 不是可选项,是必选项。

热门AI工具

更多
Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4829

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4395

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

8432

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

663

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

776

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

8662

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1180

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1336

2024.04.07

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

20

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn