讲师中心 微信公众号
AI工具推荐 视频效率加速

使用Redis实现Node.js中并发受限的资源访问队列

梦伟姑娘_4538

梦伟姑娘_4538

发布时间:2025-11-22 15:45:06

|

942人浏览过

|

来源于php中文网

原创

使用redis实现node.js中并发受限的资源访问队列

本文探讨了在Node.js应用中高效管理并发受限且具有时间限制的资源访问问题。针对传统内存队列在处理长时资源占用时面临的阻塞和HTTP超时挑战,文章提出并详细阐述了基于Redis的“即发即忘”与轮询策略。该方案通过Redis集中管理资源持有者和等待队列,有效解耦了请求与资源分配,提升了系统可伸缩性与用户体验,是解决此类复杂并发控制场景的专业级实践。

Node.js中并发受限资源访问的挑战

在构建Node.js应用程序时,经常会遇到需要管理对有限资源的并发访问场景。特别是在资源具有以下特性时,传统的内存队列或简单的并发库可能会面临挑战:

  1. 独占性: 资源在某一时刻只能被一个用户或进程持有。
  2. 时间限制: 资源被持有后,会在一定时间后自动释放,或可被手动释放。
  3. 异构资源并发: 系统中存在多种类型的资源,不同类型的资源可以独立分配,互不影响,但同类型资源仍需排队。
  4. 长时持有: 资源持有时间可能较长(例如60秒),如果将此等待时间直接绑定到HTTP请求-响应周期,将导致连接长时间阻塞,影响系统吞吐量和用户体验,甚至触发HTTP超时。

例如,一个应用允许用户请求“标题A”或“标题B”两种虚拟资源。每个标题一次只能被一个用户持有60秒。如果用户1请求标题A,用户2请求标题A,用户3请求标题B,理想的分配顺序应是用户1获得A,用户3立即获得B,用户2则等待用户1释放A。然而,若采用基于p-queue等库的内存队列方案,通常会出现全局阻塞,即使用户3请求的是不同标题,也可能需要等待用户1的60秒持有期结束,这违背了异构资源并发的初衷。

基于Redis的解耦式资源管理策略

为有效解决上述问题,一种更专业且具伸缩性的方法是采用基于Redis的“即发即忘”(Fire-and-Forget)与轮询(Polling)策略。该方案将资源分配和状态管理从即时请求-响应循环中彻底解耦,利用Redis的高性能和持久化特性来集中维护资源锁和等待队列。

核心思想

  1. 解耦请求与持有: 当用户请求资源时,Node.js服务器立即响应请求已成功接收,不等待资源实际分配。
  2. Redis作为状态中心: 使用Redis作为唯一的、可靠的状态存储,管理哪个用户当前持有哪个资源,以及哪些用户正在等待特定资源。
  3. 客户端轮询机制: 用户客户端在请求发出后,通过定期轮询服务器来查询其资源请求的最新状态。

架构概览

  • 客户端 (Client): 用户界面,负责发起资源请求和周期性地向服务器轮询资源状态。
  • Node.js 服务端 (Node.js Server): 接收客户端请求和轮询请求,其主要职责是与Redis交互,更新和查询资源状态,并向客户端返回相应信息。
  • Redis 数据库 (Redis Database): 存储核心业务逻辑所需的状态数据,包括:
    • 资源持有者信息: 记录哪个用户当前持有哪个标题,并设置过期时间。
    • 等待队列: 维护每个标题的等待用户队列,确保公平分配。

关键组件与实现细节

1. 资源持有者管理

对于每个可独占的资源(例如“标题A”),在Redis中创建一个键来存储当前持有该资源的用户ID,并为其设置一个过期时间(TTL)。

arcgis-js
arcgis-js

提供 ArcGIS Maps SDK for JavaScript 开发辅助,涵盖 2D/3D 地图视图、图层管理、数据可视化、空间分析等功能模块的参考和示例指导。

下载
  • Redis键名示例: resource:{resource_type}:current_holder (如 title:A:current_holder)
  • Redis值示例: user_id_X
  • 过期时间: 60 秒(通过SETEX命令或SET key value EX seconds实现)

当此键过期时,即表示资源已被自动释放。

2. 等待队列

为每种资源类型维护一个Redis列表(List),作为该资源的等待队列。列表中的元素是等待该资源的用户ID。

  • Redis键名示例: resource:{resource_type}:waiting_queue (如 title:A:waiting_queue)
  • 入队操作: 当用户请求资源时,将其ID添加到列表的末尾 (RPUSH)。
  • 出队操作: 当资源可用时,从列表的头部取出下一个用户ID (LPOP)。

3. 请求处理流程 (Fire-and-Forget)

当用户首次请求一个标题(例如通过HTTP POST请求)时:

  1. Node.js服务器接收到请求。
  2. 将请求用户ID添加到对应标题的Redis等待队列中(RPUSH title:A:waiting_queue user_id_Y)。
  3. 立即向客户端

热门AI工具

更多
咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
resource是什么文件
resource是什么文件

Resource文件是一种特殊类型的文件,它通常用于存储应用程序或操作系统中的各种资源信息。它们在应用程序开发中起着关键作用,并在跨平台开发和国际化方面提供支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

320

2023.12.20

js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

4576

2023.06.20

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1375

2023.07.28

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

1798

2023.08.03

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

10123

2023.08.17

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

1000

2023.09.01

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2864

2023.09.04

Js中concat和push的区别
Js中concat和push的区别

Js中concat和push的区别:1、concat用于将两个或多个数组合并成一个新数组,并返回这个新数组,而push用于向数组的末尾添加一个或多个元素,并返回修改后的数组的新长度;2、concat不会修改原始数组,是创建新的数组,而push会修改原数组,将新元素添加到原数组的末尾等等。本专题为大家提供concat和push相关的文章、下载、课程内容,供大家免费下载体验。

1589

2023.09.14

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

20

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn