讲师中心 微信公众号
AI工具推荐 视频效率加速

Python 单线程为什么也能处理高并发 I/O?

冬杰酱_7815

冬杰酱_7815

发布时间:2026-01-19 16:09:09

|

427人浏览过

|

来源于php中文网

原创

Python单线程高并发I/O靠事件循环+非阻塞I/O+协程协作调度,非多线程;await挂起协程交还控制权,I/O就绪后恢复;CPU密集型任务需用run_in_executor避免阻塞循环。

python 单线程为什么也能处理高并发 i/o?

Python 单线程能处理高并发 I/O,靠的不是“同时执行多个任务”,而是“不等”——在等待 I/O(比如网络请求、文件读写、数据库查询)时,主动把控制权交出去,去处理其他已经就绪的任务。核心机制是 事件循环 + 非阻塞 I/O + 协程协作式调度,而不是靠多线程或 CPU 并行。

非阻塞 I/O 让线程不卡在等待上

传统同步 I/O(如 requests.get())会一直卡住线程,直到响应返回;而异步 I/O(如 aiohttpasyncio.open_connection)底层使用操作系统提供的非阻塞接口(如 Linux 的 epoll、macOS 的 kqueue)。调用后立刻返回,系统会在数据就绪时通知事件循环。

  • socket 设置为 non-blocking 模式,read/write 立即返回,若无数据则抛出 BlockingIOError
  • 事件循环持续监控成百上千个 socket 的状态变化,只对“可读/可写”的 socket 才真正发起操作
  • 没有“空转轮询”,效率远高于 while 循环检查

协程让逻辑可暂停、可恢复

Python 的 async/await 定义的是协程函数,它不是线程,也不开新栈,只是普通函数对象加了个状态机。遇到 await 时,当前协程主动挂起,把控制权还给事件循环;等 I/O 就绪、结果可用时,事件循环再唤醒它继续执行。

Shadows Python Sensei
Shadows Python Sensei

Python 最佳实践助手——代码规范、设计模式、性能优化、测试与类型注解。适用于编写或审查 Python 代码。

下载
  • await 后面必须是 Awaitable 对象(如 asyncio.Futureasyncio.Task、另一个协程)
  • 挂起和恢复不涉及线程切换开销,上下文保存在协程对象内部(如局部变量存在 __code____closure__ 中)
  • 一个线程里可以轻松维持数万协程,内存占用极小(每个协程约几百字节)

事件循环统一调度,避免竞态与锁

整个异步程序运行在一个事件循环中(如 asyncio.run() 启动的默认循环),所有协程共享同一个线程、同一套变量空间。因为没有真实并发(无抢占式多任务),只要不手动调用阻塞函数(如 time.sleep()requests.get()),就不会出现竞态条件。

立即学习Python免费学习笔记(深入)”;

  • 不需要 threading.Lock,多数场景下普通变量即可安全读写
  • 调度完全由程序员控制:await 是明确的让点,不是操作系统随机中断
  • 调试更可预测——协程执行路径是确定的,不像多线程那样难以复现时序问题

注意:CPU 密集型任务仍会阻塞整个循环

异步 I/O 解决的是“等待慢设备”的问题,不是“计算慢”的问题。如果协程里做了大量数学运算、图像处理或正则匹配,事件循环会被独占,其他协程无法运行。

  • 解决方法:用 loop.run_in_executor() 把 CPU 工作扔进线程池或进程池
  • 不要在协程中调用 time.sleep(),改用 await asyncio.sleep()
  • 第三方库必须提供异步接口(如 aiohttpaiomysql),否则需包装或换库

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
while的用法
while的用法

while的用法是“while 条件: 代码块”,条件是一个表达式,当条件为真时,执行代码块,然后再次判断条件是否为真,如果为真则继续执行代码块,直到条件为假为止。本专题为大家提供while相关的文章、下载、课程内容,供大家免费下载体验。

334

2023.09.25

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

3028

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

4189

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3649

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

366

2026.01.19

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

4487

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2068

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

3418

2023.08.10

Vibeknow在线使用入口合集
Vibeknow在线使用入口合集

本专题汇总了Vibeknow在线创作视频的官方入口及网页版使用教程,涵盖PPT、PDF、Word等文档一键转讲解视频的核心操作,并整理了免费版水印规则与手机端浏览器访问指南,助你快速将知识内容视频化。

0

2026.09.21

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 169人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 271人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn