讲师中心 微信公众号
AI工具推荐 视频效率加速

Python asyncio 协程调度的内部机制

老磊吖_7362

老磊吖_7362

发布时间:2026-01-29 14:33:11

|

665人浏览过

|

来源于php中文网

原创

事件循环通过_ready队列调度Task,协程需显式创建Task或await才执行;asyncio.sleep(0)注册回调实现让权;I/O与定时器由selector和最小堆协同处理。

python asyncio 协程调度的内部机制

asyncio 事件循环怎么拿到待执行的协程

协程对象本身不会自动运行,必须被显式调度进事件循环。当你调用 asyncio.create_task()loop.create_task(),实际是把协程对象包装成 Task 实例,并调用 task._schedule_callbacks() 把它塞进事件循环的就绪队列(loop._ready,类型为 collections.deque)。直接 await coro 则由当前正在运行的 Task 自行驱动子协程,不经过就绪队列。

常见误区:以为 async def 函数一定义就入队 —— 实际上只是生成协程对象,和 lambda 类似,不调用就不触发。

  • asyncio.run(main()) 内部会新建事件循环、调用 loop.run_until_complete(main()),再启动调度
  • 手动获取当前循环用 asyncio.get_running_loop();跨线程必须用 asyncio.get_event_loop_policy().get_event_loop()
  • 如果在非协程函数里误调 await,会报 RuntimeError: await outside async function

Task 状态切换和 yield 控制点在哪

每个 Task 是一个特殊的 Future 子类,内部持有一个协程对象和状态机(_state 字段)。它只在明确的挂起点让出控制权:即遇到 await 表达式且右侧是一个“可等待对象”(Awaitable),比如另一个协程、asyncio.sleep()asyncio.Lock 或底层 Future

关键点在于:不是所有 await 都导致切换;如果被 await 的对象已就绪(如已完成的 Future),则立即返回结果,不交还控制权给事件循环。

立即学习Python免费学习笔记(深入)”;

Linux Journey
Linux Journey

当用户想学习Linux基础、命令行、文件系统等时,在LabEx查找并推荐免费的Linux Journey课程。

下载
  • 挂起时,Task 把自身从运行中移除,注册回调到被 await 的对象上(如 future.add_done_callback()
  • 恢复时,事件循环从 loop._ready 取出 Task 并调用其 _step() 方法继续执行协程帧
  • asyncio.current_task() 返回当前正在运行的 Task 对象,可用于调试或上下文追踪

为什么 asyncio.sleep(0) 能让出执行权

asyncio.sleep(0) 创建一个将在“下一个事件循环迭代”完成的 Future,它内部调用 loop.call_soon() 注册回调,因此当前 Task 必然在本次迭代结束前被暂停,并在下一轮从 loop._ready 中重新取出执行。

这常被用作协作式让权(cooperative yielding),类似其他语言的 yield,但要注意:它不保证其他 Task 立即运行 —— 如果 loop._ready 为空,事件循环可能直接进入 I/O 等待,直到有新事件唤醒。

  • 不要用 asyncio.sleep(0) 模拟忙等待,它无法替代 time.sleep()
  • 真正需要强制切出时,更推荐 await asyncio.yield_()(Python 3.12+)
  • 在 CPU 密集型协程中,仅靠 sleep(0) 不足以避免阻塞,仍需配合 loop.run_in_executor()

事件循环如何处理 I/O 和定时器

CPython 默认使用 selectors 模块实现多路复用(Linux 上是 epoll,macOS 是 kqueue),事件循环在每次迭代开始前调用 selector.select(timeout) 等待就绪的文件描述符。同时维护一个最小堆(heapq)管理定时器(loop._scheduled),每次迭代检查堆顶是否到期。

调度顺序是:先运行 loop._ready 中所有就绪 Task;再处理已到期的定时器(如 call_later);最后做一次 I/O 等待。这个三阶段循环构成一次完整的事件循环迭代。

  • 如果你看到协程响应延迟,优先检查是否有长期未返回的同步代码阻塞了整个循环
  • loop.set_debug(True) 会启用慢回调检测(如单次回调 > 100ms),并记录 Task 生命周期
  • 自定义事件循环策略(如 uvloop)替换默认实现时,必须确保其 create_future()create_task() 行为兼容 asyncio 协议

协程调度不是魔法,它依赖精确的状态跟踪与回调注册;最易忽略的是:Task 的生命周期完全由事件循环管理,一旦创建就必须被循环驱动,否则协程对象会泄漏且永不执行。调试时优先看 asyncio.all_tasks()task.get_coro(),而不是只盯着 await 语句本身。

热门AI工具

更多
AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
lambda表达式
lambda表达式

Lambda表达式是一种匿名函数的简洁表示方式,它可以在需要函数作为参数的地方使用,并提供了一种更简洁、更灵活的编码方式,其语法为“lambda 参数列表: 表达式”,参数列表是函数的参数,可以包含一个或多个参数,用逗号分隔,表达式是函数的执行体,用于定义函数的具体操作。本专题为大家提供lambda表达式相关的文章、下载、课程内容,供大家免费下载体验。

831

2023.09.15

python lambda函数
python lambda函数

本专题整合了python lambda函数用法详解,阅读专题下面的文章了解更多详细内容。

325

2025.11.08

Python lambda详解
Python lambda详解

本专题整合了Python lambda函数相关教程,阅读下面的文章了解更多详细内容。

414

2026.01.05

C++ Lambda 表达式与函数式编程
C++ Lambda 表达式与函数式编程

深入讲解 C++ Lambda 表达式与函数式编程范式,涵盖 Lambda 基础语法与返回值推导、值捕获与引用捕获的区别与陷阱、初始化捕获(C++14 广义捕获)、泛型 Lambda(auto 参数)、mutable 关键字修改捕获变量、std::function 类型擦除与函数包装、std::bind 参数绑定(及其被 Lambda 替代的趋势)、Lambda 在 STL 算法(sort/transform/for_each/remo

509

2026.05.06

Java 函数式接口与 Lambda 进阶技巧
Java 函数式接口与 Lambda 进阶技巧

在 Java Stream 基础之上进一步深入函数式编程,涵盖 @FunctionalInterface 注解与自定义函数式接口设计、四种方法引用(静态/实例/对象/构造器)的使用场景、Lambda 中的 effectively final 变量捕获规则、函数组合(andThen/compose)与柯里化技巧、Comparator 链式比较器构建、CompletableFuture 异步函数式编排、Reactor / RxJava 响应

348

2026.05.08

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

4567

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2088

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3478

2023.08.10

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

0

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn