讲师中心 微信公众号
AI工具推荐 视频效率加速

C#怎么实现消息队列 C#如何用RabbitMQ和Kafka实现异步消息生产和消费【架构】

夜晨同学_9181

夜晨同学_9181

发布时间:2026-04-10 16:12:04

|

325人浏览过

|

来源于php中文网

原创

ConcurrentQueue适用于单进程多线程内的轻量消息缓冲,如指令排队、限流缓冲;不适用于需ACK、死信、延迟或跨机器的分布式场景。

c#怎么实现消息队列 c#如何用rabbitmq和kafka实现异步消息生产和消费【架构】

ConcurrentQueue 适合什么场景?不适合什么场景?

当你的“消息队列”只在单进程内、多线程间流转(比如硬件指令排队、本地任务缓冲),ConcurrentQueue<t></t> 是最轻量、零依赖的选择。它不跨进程、不持久化、不支持事务,但吞吐极高、无锁设计、GC 友好。

常见错误现象:ConcurrentQueue 被误用于微服务间通信——结果一重启,队列全空;或用它替代 RabbitMQ 做分布式重试,发现失败消息根本无法落盘、无法监控、无法人工干预。

  • 适用:设备控制指令缓存、Web API 请求限流缓冲、后台任务暂存(如日志批量写入前的内存聚合)
  • 不适用:需要消息确认(ACK)、死信处理、延迟投递、跨机器分发的场景
  • 注意:Enqueue 和 TryDequeue 都是 O(1),但别在循环里反复 TryDequeue 空转——加 await Task.Delay(1) 或用 Channel<t></t> 更合适

RabbitMQ 的 Connection 和 Channel 到底怎么管?

很多人写完第一版 RabbitMQ 代码就遇到连接泄漏、Channel 关闭异常、或者“Operation interrupted”错误——根源几乎都出在生命周期管理上。IConnection 是重量级对象,必须复用;IModel(即 Channel)是轻量级但**非线程安全**,不能跨线程共享,也不能长期闲置。

使用场景:高并发 Web API 接收请求后发消息,后台多个消费者线程各自独占一个 IModel 拉取消息。

  • IConnection 应作为单例(如注入 IServiceProvider),整个应用生命周期只创建一次
  • 每个消费者线程应创建自己的 IModel,并在该线程结束时显式调用 Close()
  • 别在 using 块里创建 IModel 后立刻 Dispose——RabbitMQ 官方客户端会抛 AlreadyClosedException
  • 示例关键点:channel.BasicQos(prefetchSize: 0, prefetchCount: 1, global: false) 必须设,否则消费者可能一次拉太多消息导致堆积或 OOM

Kafka 在 C# 里为什么总连不上 localhost:9092?

不是代码问题,99% 是 Kafka 服务端配置没对。Kafka 默认监听的是 localhost,但 Docker 容器或 WSL 环境下,.NET 客户端实际访问的是宿主机网络栈,而 Kafka server.properties 里 advertised.listeners 如果写成 PLAINTEXT://localhost:9092,消费者拿到这个地址后会尝试连自己本机的 9092 端口——自然失败。

C#
C#

"避开 C# 常见错误——空陷阱、异步陷阱、LINQ 陷阱及资源泄漏。"

下载

错误信息典型表现:Unable to resolve the IP address for 'localhost' 或连接超时后抛 TimeoutException。

  • Windows + Docker Desktop:把 advertised.listeners 改成 PLAINTEXT://host.docker.internal:9092
  • WSL2:改用宿主机真实 IP(如 PLAINTEXT://172.20.10.5:9092),并确保 Windows 防火墙放行 9092
  • C# 客户端用 Confluent.Kafka 时,bootstrap.servers 必须和 advertised.listeners 的协议+域名+端口完全一致
  • 别跳过 group.id 配置——没有它,消费者无法加入组,也就收不到任何消息

MSMQ 还值得学吗?Windows Server 环境下怎么绕过权限坑?

如果项目运行在老旧内网、离线环境、或必须满足等保三级对“国产化中间件不可用”的兜底要求,MSMQ 仍有现实价值。但它不是“过时”,而是“窄路”——一旦选了,就得接受它的规则。

最容易卡住的不是代码,是 Windows 权限。哪怕你用管理员身份运行程序,MessageQueue.Create 仍可能报 Access is denied。

  • 必须先在“控制面板 → 程序和功能 → 启用或关闭 Windows 功能”中勾选“Microsoft Message Queue (MSMQ) Server”及其子项
  • 创建私有队列时路径格式必须是 @".\Private$\MyAppQueue",开头的 . 表示本地机器,Private$ 不可省略或拼错
  • 首次创建队列后,右键“计算机管理 → 服务和应用程序 → 消息队列 → 私有队列”,找到队列 → 属性 → 安全 → 给当前运行程序的用户(如 IIS_IUSRS 或具体用户名)添加“完全控制”权限
  • 事务队列(MessageQueueTransactionType.Single)需额外启用“MSMQ Directory Service”组件,否则抛 MessageQueueException

跨进程、跨机器、要重试、要监控、要可观测——这些需求一出现,ConcurrentQueue 就该让位;而 RabbitMQ 和 Kafka 的差异不在性能数字,而在你愿不愿意为“消息不丢”付出运维成本。MSMQ 的坑不在代码,在 Windows 策略和权限弹窗里——这点很容易被忽略。

相关文章

Kafka Eagle可视化工具
Kafka Eagle可视化工具

Kafka Eagle是一款结合了目前大数据Kafka监控工具的特点,重新研发的一块开源免费的Kafka集群优秀的监控工具。它可以非常方便的监控生产环境中的offset、lag变化、partition分布、owner等,有需要的小伙伴快来保存下载体验吧!

下载

相关标签:

c#

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

Flowith
Flowith Hot

Flowith是一款基于画布和智能体工作流的 AI 协作工作空间。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
c#是什么意思
c#是什么意思

C#是一种通用的面向对象编程语言,它在.NET框架上运行,可用于开发各种类型的应用程序。本专题为大家提供c#相关的各种文章、以及下载和课程。

1112

2023.08.08

什么是c#
什么是c#

C#(读作C Sharp)是一种现代的、通用的、面向对象的编程语言。它由微软公司开发,于2000年首次发布,主要用于开发Windows桌面应用程序、Web应用程序、移动应用程序以及游戏开发等领域。C#是一种类型安全和托管的编程语言,它结合了C++的强大性能和C语言的简单易学特点,并引入了许多新的特性和概念,如委托、属性、泛型和异步编程等,以提高开发效率和代码可维护性。

3271

2023.08.31

C#中base关键字的用法
C#中base关键字的用法

在C#中,base关键字用于访问当前类的基类成员,这包括基类的字段、属性、方法、构造函数、索引器以及事件。想了解更多C#的相关内容,可以阅读本专题下面的文章。

925

2024.03.13

C#Task用法
C#Task用法

Task在C#中是用于表示异步操作的对象,它位于System.Threading.Tasks命名空间中。想了解更多C#中各种用法的相关内容,可以阅读本专题下面的文章。

2655

2024.03.14

C# 并发与异步编程
C# 并发与异步编程

本专题系统讲解 C# 异步编程与并发控制,重点介绍 async 和 await 关键字、Task 类、线程池管理、并发数据结构、死锁与线程安全问题。通过多个实战项目,帮助学习者掌握 如何在 C# 中编写高效的异步代码,提升应用的并发性能与响应速度。

352

2026.02.03

C# 多线程与异步编程
C# 多线程与异步编程

本专题深入讲解 C# 中多线程与异步编程的核心概念与实战技巧,包括线程池管理、Task 类的使用、async/await 异步编程模式、并发控制与线程同步、死锁与竞态条件的解决方案。通过实际项目,帮助开发者掌握 如何在 C# 中构建高并发、低延迟的异步系统,提升应用性能和响应速度。

429

2026.02.06

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

631

2026.03.11

C# Unity游戏开发与ECS架构实践
C# Unity游戏开发与ECS架构实践

本专题聚焦 C# 在 Unity 游戏开发中的应用,系统讲解 ECS(Entity-Component-System)架构设计、游戏对象管理、性能优化与内存控制策略。通过实际游戏案例,帮助开发者构建高性能、结构清晰的游戏系统,提高游戏开发效率与运行性能。

329

2026.04.13

Docker Desktop怎么设置端口映射
Docker Desktop怎么设置端口映射

本专题聚焦Docker Desktop容器端口映射与访问配置,整理从创建容器、设置端口绑定到验证本地服务访问的操作流程。针对端口被占用、映射配置错误、容器服务无法访问等情况,也提供相应的检查方向,方便用户完成端口配置。

0

2026.11.03

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn