讲师中心 微信公众号
AI工具推荐 视频效率加速

Python并发系统学习路线第215讲_核心原理与实战案例详解【技巧】

大磊姑娘_5525

大磊姑娘_5525

发布时间:2025-12-27 23:23:02

|

554人浏览过

|

来源于php中文网

原创

Python并发稳定需避免隐式阻塞、上下文切换失控、资源竞争未加锁及协程混入同步I/O;asyncio.run()不可嵌套调用,因内部检查并拒绝已在运行的事件循环;应顶层调用,内部用await或create_task();跨同步异步边界宜用to_thread()(Py3.9+)或run_in_executor();协程间共享状态必须用asyncio.Lock且按资源独立实例化。

python并发系统学习路线第215讲_核心原理与实战案例详解【技巧】

Python 并发不是靠多开几个 threading.Thread 或塞一堆 asyncio.create_task() 就能稳的——真正卡住系统的,往往是隐式阻塞、上下文切换失控、资源竞争没加锁,或者协程里混进了同步 I/O。

为什么 asyncio.run() 不能嵌套调用

这是初学者最常撞上的硬错误。当你在已运行的事件循环里再调用 asyncio.run(),会直接抛出 RuntimeError: asyncio.run() cannot be called from a running event loop。

  • 根本原因:asyncio.run() 内部会检查当前线程是否已有运行中的事件循环,有就拒绝启动
  • 常见场景:在 Flask/FastAPI 的请求处理函数中、或某个已由 asyncio.run() 启动的协程里,又写了 asyncio.run(some_coro())
  • 正确做法:顶层用 asyncio.run() 启动;内部一律用 await 或 asyncio.create_task();若需从同步代码“切”进异步上下文(如线程中),改用 asyncio.get_event_loop().create_task()(注意循环存在性)或 asyncio.to_thread()(Py3.9+)

concurrent.futures.ThreadPoolExecutor 与 asyncio.to_thread() 怎么选

两者都用于把阻塞操作“搬出”主线程,但适用阶段和控制粒度不同。

  • ThreadPoolExecutor 是传统线程池,适合长期复用、需精细控制线程数(如 max_workers=4)、或要统一管理生命周期(.shutdown(wait=True))的场景
  • asyncio.to_thread()(Py3.9+)更轻量,每次调用自动分配线程并 await 返回,适合零散、偶发的阻塞调用(如读文件、调用旧版同步 SDK)
  • 关键区别:前者不返回协程对象,需配合 loop.run_in_executor() 才能 await;后者直接返回可 await 的协程
import asyncio
import time
<h1>错误:直接 await 同步函数 → 主线程卡死</h1><h1>await time.sleep(1)</h1><h1>正确(Py3.9+)</h1><p>await asyncio.to_thread(time.sleep, 1)</p><div class="aritcle_card flexRow">
                                                        <div class="artcardd flexRow">
                                                                <a class="aritcle_card_img" href="/xiazai/skill6933" title="python-script-generator"><img
                                                                                src="https://img.php.cn/upload/skill/000/000/081/179119443150703.jpg" alt="python-script-generator"  onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
                                                                <div class="aritcle_card_info flexColumn">
                                                                        <a href="/xiazai/skill6933" title="python-script-generator">python-script-generator</a>
                                                                        <p>快速生成专业的 Python 脚本和应用代码。一键创建完整项目结构,支持CLI、API、爬虫、Bot、Django等多种项目类型,包含完整的项目结构、配置文件、依赖管理、测试、README和文档。</p>
                                                                </div>
                                                                <a href="/xiazai/skill6933" title="python-script-generator" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a>
                                                        </div>
                                                </div><p><span>立即学习</span>“<a href="https://pan.quark.cn/s/00968c3c2c15" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">Python免费学习笔记(深入)</a>”;</p><h1>或兼容老版本</h1><p>loop = asyncio.get_running_loop()
await loop.run_in_executor(None, time.sleep, 1)

用 asyncio.Lock 保护共享状态,但别锁错对象

协程并发下,threading.Lock 完全无效——它只对线程起作用,而多个协程可能跑在同一个线程里。

  • 必须用 asyncio.Lock,且每个需要保护的共享变量/资源应配独立的锁实例
  • 典型错误:所有协程共用一个全局 lock = asyncio.Lock(),结果本该互斥的两个不同资源(比如用户余额和订单号生成器)被强绑定,造成不必要等待
  • 更隐蔽的问题:在类方法中定义 self.lock = asyncio.Lock(),但忘记 await self.lock.acquire(),或忘了 try/finally 释放
class Counter:
    def __init__(self):
        self.value = 0
        self.lock = asyncio.Lock()  # 每个实例独享锁
<pre class='brush:python;toolbar:false;'>async def increment(self):
    async with self.lock:  # 自动 acquire/release
        self.value += 1
        return self.value</pre>

并发真正的复杂点不在语法,而在你是否清楚每一行代码执行时,CPU 在哪、IO 在哪、锁在哪、事件循环有没有被意外阻塞——这些不会报错,但会让吞吐量掉一半、延迟毛刺翻倍、压测时连接池耗尽。留心那些没显式写 await 却实际会阻塞的调用,比如某些数据库驱动的 .execute()、日志库的同步刷盘、甚至 json.loads() 处理超大字符串。

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
flask框架如何搭建
flask框架如何搭建

搭建步骤:1、安装Python和Pip;2、创建虚拟环境;3、安装Flask;4、创建Flask应用;5、运行应用;6、访问应用。想了解更多flask框架的相关内容,可以阅读本专题下面的文章。

3355

2024.06.27

Python Flask框架
Python Flask框架

本专题专注于 Python 轻量级 Web 框架 Flask 的学习与实战,内容涵盖路由与视图、模板渲染、表单处理、数据库集成、用户认证以及RESTful API 开发。通过博客系统、任务管理工具与微服务接口等项目实战,帮助学员掌握 Flask 在快速构建小型到中型 Web 应用中的核心技能。

5084

2025.08.25

Python Flask Web框架与API开发
Python Flask Web框架与API开发

本专题系统介绍 Python Flask Web框架的基础与进阶应用,包括Flask路由、请求与响应、模板渲染、表单处理、安全性加固、数据库集成(SQLAlchemy)、以及使用Flask构建 RESTful API 服务。通过多个实战项目,帮助学习者掌握使用 Flask 开发高效、可扩展的 Web 应用与 API。

296

2025.12.15

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2055

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

3022

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

1016

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

3419

2025.09.10

Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

119

2025.12.22

C++运算符基础入门
C++运算符基础入门

本专题详细讲解了C++运算符的类型、语法与使用方法,涵盖算术运算符、关系运算符、逻辑运算符、位运算符、赋值运算符、条件运算符及其他特殊运算符,并通过代码示例解析优先级与结合性。

0

2026.10.09

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn