讲师中心 微信公众号
AI工具推荐 视频效率加速

c# 如何在c#中实现一个异步的生产者消费者队列

大雪姑娘_4046

大雪姑娘_4046

发布时间:2026-01-17 11:41:02

|

339人浏览过

|

来源于php中文网

原创

推荐用 Channel 实现线程安全异步生产者消费者队列,它无锁、轻量、原生支持 async/await;避免误用 ConcurrentQueue 或 BlockingCollection 的同步阻塞操作。

c# 如何在c#中实现一个异步的生产者消费者队列

用 Channel<t></t> 实现线程安全的异步生产者消费者队列

直接上结论:C# 6+(.NET Core 2.1+)推荐用 System.Threading.Channels.Channel<t></t>,它专为高并发异步场景设计,比手写 BlockingCollection<t></t> + Task 组合更轻量、无锁、原生支持 async/await。

常见错误是试图用 ConcurrentQueue<t></t> 自己封装 awaitable 操作——它本身不提供异步等待能力,强行加 Task.Delay 或轮询会浪费 CPU;也有人误用 BlockingCollection<t></t> 的 Take(),它会同步阻塞线程,破坏 async 上下文。

  • Channel.CreateBounded<t>()</t> 创建有界通道,溢出时可配置拒绝策略(如 DropWrite 或抛异常)
  • Channel.CreateUnbounded<t>()</t> 适合写入吞吐优先、内存可控的场景
  • 生产端调用 Writer.WriteAsync(item),消费端用 Reader.ReadAsync() —— 两者都返回 ValueTask,无分配开销
  • 通道关闭后,Reader.ReadAsync() 会完成并返回 default(T),需配合 TryRead 或检查 WaitToReadAsync().IsCompletedSuccessfully
var channel = Channel.CreateBounded<string>(100);
<p>// 生产者
_ = Task.Run(async () =>
{
for (int i = 0; i < 5; i++)
{
await channel.Writer.WriteAsync($"msg-{i}");
await Task.Delay(100);
}
channel.Writer.Complete();
});</p><p>// 消费者
_ = Task.Run(async () =>
{
await foreach (var msg in channel.Reader.ReadAllAsync())
{
Console.WriteLine($"Received: {msg}");
}
});

如何正确处理消费者异常与通道终止

消费者任务崩溃或未捕获异常会导致 ReadAllAsync() 提前退出,但通道可能仍有未读项;更隐蔽的问题是:生产者调用 Complete() 后,若消费者没读完就退出,剩余数据会丢失。

C#
C#

"避开 C# 常见错误——空陷阱、异步陷阱、LINQ 陷阱及资源泄漏。"

下载
  • 必须在 await foreach 外层包 try/catch,否则异常会静默终止迭代
  • 若需确保所有已入队消息被处理,不要依赖 channel.Writer.Complete() 触发消费者退出——应另设信号(如 CancellationToken)协调停机
  • Reader.Completion 是 Task,反映消费者侧是否完成(包括异常终止),可用于 await channel.Reader.Completion 等待消费结束
  • 避免在消费者中直接 await channel.Reader.Completion —— 它不会等未读项,只等迭代器退出

什么时候不该用 Channel<t></t>?

不是所有“队列”需求都适合 Channel。它定位是“流式数据传输”,不提供随机访问、计数查询、中间件插拔等能力。

  • 需要实时获取当前队列长度?Channel.Reader.Count 只在有界通道且未被并发写入时可靠;无界通道返回 -1
  • 要支持多个消费者竞争消费同一消息?Channel 是单消费者语义;此时该用 ServiceBus 或 RabbitMQ
  • 消息需持久化、重试、死信?Channel 纯内存,崩溃即丢;必须外接存储层
  • 项目还在 .NET Framework 4.8?Channel 不可用,只能降级用 BlockingCollection<t></t> + GetConsumingEnumerable()(但无法真正异步)

替代方案:BlockingCollection<t></t> 的异步包装陷阱

有人用 Task.Run(() => collection.Take()) 伪异步,这本质是线程池抢占,增加调度开销且无法取消;正确做法是仅在必须兼容旧框架时,用 TryTake 配合短时 Task.Delay 循环,但务必设超时和取消令牌。

  • 永远不要写 await Task.Run(() => collection.Take()) —— 这违背 async/await 减少线程占用的初衷
  • 若坚持用 BlockingCollection,消费循环应类似:while (collection.TryTake(out var item, 10, token)) { ... }
  • BlockingCollection 的 Add 在有界模式下可能阻塞线程,而 Channel.Writer.WriteAsync 在满时默认返回 ValueTask 并挂起,更可控

实际落地时,最易忽略的是消费者异常传播路径和通道生命周期管理——写个 await foreach 很容易,但谁负责捕获异常?谁决定何时 Complete()?这些边界不厘清,上线后就会出现消息静默丢失或消费者假死。

热门AI工具

更多
花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

相关专题

更多
rabbitmq和kafka有什么区别
rabbitmq和kafka有什么区别

rabbitmq和kafka的区别:1、语言与平台;2、消息传递模型;3、可靠性;4、性能与吞吐量;5、集群与负载均衡;6、消费模型;7、用途与场景;8、社区与生态系统;9、监控与管理;10、其他特性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

664

2024.02.23

Java 消息队列与异步架构实战
Java 消息队列与异步架构实战

本专题系统讲解 Java 在消息队列与异步系统架构中的核心应用,涵盖消息队列基本原理、Kafka 与 RabbitMQ 的使用场景对比、生产者与消费者模型、消息可靠性与顺序性保障、重复消费与幂等处理,以及在高并发系统中的异步解耦设计。通过实战案例,帮助学习者掌握 使用 Java 构建高吞吐、高可靠异步消息系统的完整思路。

1128

2026.01.28

RabbitMQ使用教程合集
RabbitMQ使用教程合集

RabbitMQ使用教程合集整理 RabbitMQ 基础教程、消息队列开发案例、生产者消费者、交换机与队列实战内容。

224

2026.05.20

RabbitMQ集群部署指南
RabbitMQ集群部署指南

RabbitMQ集群部署指南聚合 RabbitMQ 集群部署、高可用架构、镜像队列、故障恢复、监控与运维优化内容。

137

2026.05.20

RabbitMQ Docker实战指南
RabbitMQ Docker实战指南

RabbitMQ Docker实战指南提供 RabbitMQ Docker 镜像部署、Docker Compose、Kubernetes Operator 与云原生实践教程。

162

2026.05.20

什么是中间件
什么是中间件

中间件是一种软件组件,充当不兼容组件之间的桥梁,提供额外服务,例如集成异构系统、提供常用服务、提高应用程序性能,以及简化应用程序开发。想了解更多中间件的相关内容,可以阅读本专题下面的文章。

709

2024.05.11

Golang 中间件开发与微服务架构
Golang 中间件开发与微服务架构

本专题系统讲解 Golang 在微服务架构中的中间件开发,包括日志处理、限流与熔断、认证与授权、服务监控、API 网关设计等常见中间件功能的实现。通过实战项目,帮助开发者理解如何使用 Go 编写高效、可扩展的中间件组件,并在微服务环境中进行灵活部署与管理。

644

2025.12.18

ThinkPHP中间件机制与请求拦截处理实践
ThinkPHP中间件机制与请求拦截处理实践

本专题围绕 ThinkPHP 中间件体系展开,深入讲解中间件的定义、注册与执行流程。内容包括全局中间件与路由中间件的区别、请求前后处理逻辑、自定义中间件开发以及权限验证与日志处理应用。通过实际案例,帮助开发者掌握中间件在项目中的核心作用与最佳实践。

458

2026.03.31

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

0

2026.11.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn