讲师中心 微信公众号
AI工具推荐 视频效率加速

为什么Redis List在并发高时使用LPUSH和RPOP会丢消息

浅瑶同学_5482

浅瑶同学_5482

发布时间:2026-09-29 11:13:47

|

146人浏览过

|

来源于php中文网

原创

RPOP后崩溃会导致消息永久丢失,因其“读即删”特性:消息被取出即从List中彻底删除,而Redis无状态跟踪、无ACK机制,消费者崩溃后无法重试或回滚。

为什么redis list在并发高时使用lpush和rpop会丢消息

Redis List 本身不丢消息,LPUSH 和 RPOP 也不会主动删数据——丢消息的根源在于「业务逻辑没兜住」+「操作非原子」+「无状态跟踪」这三者叠加,在高并发下被迅速放大。

为什么RPOP后崩溃会导致消息永久丢失

因为 RPOP 是“读即删”:它返回元素的同时,该元素就从 List 中彻底消失了。如果消费者拿到返回值后、还没开始处理就 panic / kill / 网络中断 / 写 DB 失败,这条消息就再无踪迹。Redis 不知道它曾被谁取走、是否完成、是否该重发——List 没有 ACK、没有 pending 状态、没有重试队列。

  • RPOP 返回的是值,不是引用;返回后 Redis 就不管了
  • 没有超时自动回滚机制,也不支持事务回滚(即使包在 EXEC 里,RPOP 已执行完)
  • 单靠应用层 try-catch 无法覆盖进程级崩溃(如 OOM Kill、SIGKILL)

为什么多个消费者同时 RPOP 会漏判或空转

高并发下多个客户端几乎同时对同一个 List 执行 RPOP,最后一个执行的必然拿到 nil。但很多代码把 nil 当作“队列空”,直接跳过或退出循环,而不是继续等待新消息——这既造成漏处理(若刚有新 LPUSH 还没来得及被轮到),也引发 CPU 空转或休眠延迟问题。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 单纯用 LLEN + RPOP 判断仍存在竞态窗口:LLEN 返回长度 > 0 后,另一客户端抢先 RPOP 成功,当前客户端再 RPOP 就是 nil
  • 用 BRPOP 可避免空转,但它只解决“等待”问题,不解决“取到后崩溃即丢失”的核心缺陷
  • 集群环境下,BRPOP 若超时断连又未做重连+续读,也会漏掉刚好在断连瞬间入队的消息

为什么不用 BRPOPLPUSH 就很难补救

真正能堵住“取到即丢”这个缺口的,只有原子性转移命令:BRPOPLPUSH 或 RPOPLPUSH。它们把“取出”和“暂存”压进一个不可分割的操作里,确保任务始终落在某个 List 中(就绪 or 处理中),哪怕消费者当场死机,重启后也能从 pending List 捞回来重试。

  • 千万别拆成 RPOP + LPUSH:中间任意一步失败,任务就蒸发
  • BRPOPLPUSH 的 timeout 参数别设 0,生产环境建议 10–30 秒,防止单点卡死阻塞整个消费线程
  • pending List 的 key 必须带业务隔离前缀(如 queue:order:pending:{shard}),否则多消费者混用会互相覆盖或误删
  • Redis Cluster 下必须用 {xxx} 标签保证 source 和 destination 落在同一 slot,否则报 CROSSSLOT

最常被忽略的一点:即使上了 BRPOPLPUSH,pending List 本身不带 TTL,也不自动清理。一旦消费者 ACK 步骤异常(比如 LREM 报错、网络超时、逻辑 bug),pending 里的任务就会永远堆积——这不是丢消息,而是让消息“卡住不动”,等同于业务侧不可见的丢失。

热门AI工具

更多
Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4189

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

3675

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

6572

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

623

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

716

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

6062

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1140

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

996

2024.04.07

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

0

2026.09.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn