讲师中心 微信公众号
AI工具推荐 视频效率加速

Python多线程系统学习路线第216讲_核心原理与实战案例详解【指导】

大磊姑娘_5525

大磊姑娘_5525

发布时间:2025-12-27 23:00:02

|

190人浏览过

|

来源于php中文网

原创

Python多线程无法加速CPU密集型任务,因CPython的GIL强制单线程执行字节码;仅I/O密集型任务适用threading,CPU密集型必须用multiprocessing或ProcessPoolExecutor。

python多线程系统学习路线第216讲_核心原理与实战案例详解【指导】

Python 的多线程在 CPU 密集型任务中基本不加速,这是由 GIL(全局解释器锁)决定的,不是写法或版本问题。

为什么 threading 无法提升 CPU 密集型任务性能

CPython 解释器为保证内存管理安全,在同一时刻只允许一个线程执行 Python 字节码。GIL 是互斥锁,不是可配置开关,也无法通过多核绕过。

  • 所有纯 Python 循环、数值计算(如 sum([x**2 for x in range(10**7)]))都受 GIL 限制
  • threading.Thread 启动再多,CPU 使用率也不会超过单核 100%
  • 只有当线程因 I/O(如 time.sleep()、requests.get()、文件读写)主动释放 GIL 时,其他线程才能运行

什么时候该用 threading,而不是 multiprocessing

适用场景非常明确:高并发 I/O 等待,且任务间无强状态共享需求。

  • 同时发起 100 个 HTTP 请求 → 用 threading + requests(每个请求阻塞时自动让出 GIL)
  • 监听多个 socket 连接并响应 → threading 比 multiprocessing 启动快、内存开销小
  • 需要共享内存对象(如 dict、list)且不涉及复杂同步 → threading 可直接引用,multiprocessing 需用 Manager 或 Queue
  • 避免 multiprocessing 在 Windows 上反复导入主模块的问题

threading.Thread 启动后不执行?常见卡点

最常被忽略的是没调用 start(),而是误调了 run() —— 后者只是普通函数调用,仍在主线程同步执行。

windows-shell
windows-shell

Windows 命令行编码与兼容规范。涵盖 GBK/UTF-8 编码、PowerShell/pwsh 互操作、Python/Node.js、Git 配置及代码生成规则。适用于 Windows 10/11 + MSYS2/Git Bash 环境下的所有命令行操作。

下载

立即学习“Python免费学习笔记(深入)”;

import threading
import time
<p>def worker():
time.sleep(1)
print("done")</p><p>t = threading.Thread(target=worker)
t.run()  # ❌ 错误:同步执行,不启新线程</p><h1>t.start()  # ✅ 正确:异步启动线程</h1>
  • 忘记 t.join() 导致主线程退出,子线程被强制终止(尤其脚本末尾无等待)
  • 使用 lambda 传参时闭包陷阱:for i in range(3): Thread(target=lambda: print(i)) 会全打印 2,应写成 lambda i=i: print(i)
  • 未处理异常:线程内抛出的异常不会传播到主线程,需在 target 函数里捕获或重写 run()

真正需要并行计算时,绕不开 multiprocessing 或 concurrent.futures.ProcessPoolExecutor

只要任务是 CPU 密集型(如图像处理、加密、科学计算),必须用进程而非线程。注意:

  • multiprocessing 中的函数必须能被序列化(不能是嵌套函数、lambda、类实例方法,除非用 functools.partial 包装)
  • 进程间通信比线程慢得多,频繁传大数据(如大数组)会成为瓶颈;此时应考虑 mmap 或 shared_memory(Python 3.8+)
  • concurrent.futures.ProcessPoolExecutor 比裸用 multiprocessing.Process 更简洁,推荐作为默认选择

多线程的“并发”和多进程的“并行”,底层机制完全不同;混淆这两者,是绝大多数性能问题的根源。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

相关专题

更多
python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end=' ', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

3020

2023.09.27

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

249

2026.02.03

lambda表达式
lambda表达式

Lambda表达式是一种匿名函数的简洁表示方式,它可以在需要函数作为参数的地方使用,并提供了一种更简洁、更灵活的编码方式,其语法为“lambda 参数列表: 表达式”,参数列表是函数的参数,可以包含一个或多个参数,用逗号分隔,表达式是函数的执行体,用于定义函数的具体操作。本专题为大家提供lambda表达式相关的文章、下载、课程内容,供大家免费下载体验。

1031

2023.09.15

python lambda函数
python lambda函数

本专题整合了python lambda函数用法详解,阅读专题下面的文章了解更多详细内容。

345

2025.11.08

Python lambda详解
Python lambda详解

本专题整合了Python lambda函数相关教程,阅读下面的文章了解更多详细内容。

574

2026.01.05

C++ Lambda 表达式与函数式编程
C++ Lambda 表达式与函数式编程

深入讲解 C++ Lambda 表达式与函数式编程范式,涵盖 Lambda 基础语法与返回值推导、值捕获与引用捕获的区别与陷阱、初始化捕获(C++14 广义捕获)、泛型 Lambda(auto 参数)、mutable 关键字修改捕获变量、std::function 类型擦除与函数包装、std::bind 参数绑定(及其被 Lambda 替代的趋势)、Lambda 在 STL 算法(sort/transform/for_each/remo

709

2026.05.06

Java 函数式接口与 Lambda 进阶技巧
Java 函数式接口与 Lambda 进阶技巧

在 Java Stream 基础之上进一步深入函数式编程,涵盖 @FunctionalInterface 注解与自定义函数式接口设计、四种方法引用(静态/实例/对象/构造器)的使用场景、Lambda 中的 effectively final 变量捕获规则、函数组合(andThen/compose)与柯里化技巧、Comparator 链式比较器构建、CompletableFuture 异步函数式编排、Reactor / RxJava 响应

408

2026.05.08

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

4358

2023.08.10

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

40

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn