讲师中心 微信公众号
AI工具推荐 视频效率加速

Python 生成器是如何节省内存的

星杰大大_6273

星杰大大_6273

发布时间:2026-01-28 18:33:08

|

753人浏览过

|

来源于php中文网

原创

生成器函数返回迭代器对象而非列表,调用时立即返回generator,每次yield挂起并保存状态,仅按需计算单个值,内存占用极小;生成器表达式同理,但不可索引、不可重复遍历。

python 生成器是如何节省内存的

生成器函数返回的是迭代器对象,不是一次性列表

调用 def 定义的生成器函数(含 yield)时,Python 不执行函数体,而是立即返回一个 generator 对象。这个对象是迭代器,支持 __next__(),但内部不保存全部结果。

对比普通函数:

  • 返回 list 的函数:必须在内存中构造完整列表,比如 [x**2 for x in range(1000000)] 会立刻占用数百 MB
  • 生成器函数:每次只计算并产出一个值,例如 def squares(n): yield from (i**2 for i in range(n)),调用时几乎不占额外内存

yield 让函数挂起并保留局部状态

每次遇到 yield,函数暂停执行,把值交还给调用方,同时冻结当前栈帧(包括局部变量、指令指针等)。下次调用 __next__() 时从中断处继续,而不是重新开始。

这意味着:

立即学习“Python免费学习笔记(深入)”;

macOS UI 自动化技能包 —— 用 Python 控制你的 Mac
macOS UI 自动化技能包 —— 用 Python 控制你的 Mac

让 macOS 自动化像说话一样简单 —— 用代码控制你的 Mac,无需学习 AppleScript 系统要求 macOS 14+ (Sonoma) Python 3.9+ 需要开启:辅助功能 + 屏幕录制权限

下载
  • 不需要为整个序列分配连续内存空间
  • 递归或复杂状态(如文件读取位置、计数器)可自然保留在生成器内部
  • 若生成器未被完全消费(比如只取前 5 个值),后续逻辑不会触发,对应计算被跳过

生成器表达式比列表推导式更省内存

(x**2 for x in range(10**6)) 是生成器表达式,而 [x**2 for x in range(10**6)] 是列表推导式。前者本质是匿名生成器函数调用,后者直接构建对象列表。

关键差异:

  • 生成器表达式不支持索引、len()、重复遍历;必须用 for 或显式 next()
  • 若需多次使用结果,生成器只能消费一次,强行转成 list() 就失去内存优势
  • 嵌套生成器(如 (y for x in data for y in x))仍保持单次流式处理,无中间容器

注意生成器无法回退和随机访问

生成器是单向迭代器,没有 seek() 或 reset() 方法。一旦调用 next() 走过某个值,它就从内存中“消失”了(除非你额外缓存)。

容易踩的坑:

  • 误以为 list(gen) 后还能继续用 gen —— 实际上已耗尽,再调用 next(gen) 会抛 StopIteration
  • 在 for 循环中意外中断(如 break 或异常),可能导致资源未清理(建议用 try/finally 或上下文管理器封装)
  • 调试时打印 gen 只看到 <generator object ...></generator>,看不到内容,得用 list(gen) 或逐个 next() 查看

真正省内存的前提,是你别把它一次性全展开。只要保持“按需产出、即产即用”的节奏,生成器的轻量级状态机机制才能发挥效果。

热门AI工具

更多
立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级麦吉

一款通过数字员工协作完成调研、数据分析与文档制作的AI办公平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
java中break的作用
java中break的作用

本专题整合了java中break的用法教程,阅读专题下面的文章了解更多详细内容。

2980

2025.10.15

java break和continue
java break和continue

本专题整合了java break和continue的区别相关内容,阅读专题下面的文章了解更多详细内容。

807

2025.10.24

C++ 智能指针与现代内存管理
C++ 智能指针与现代内存管理

深入讲解 C++ 现代内存管理的核心工具——智能指针,涵盖 unique_ptr 独占所有权语义、shared_ptr 引用计数机制与循环引用问题、weak_ptr 弱引用的应用场景、make_unique/make_shared 工厂函数的性能优势、自定义删除器的编写、RAII 资源管理思想的实践,以及从裸指针迁移到智能指针的重构策略,帮助开发者编写安全无泄漏的现代 C++ 代码。

379

2026.04.23

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

6287

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2648

2023.08.10

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

40

2026.10.28

Vite 如何搭配 Vue.js
Vite 如何搭配 Vue.js

Vite搭配Vue.js专题汇集创建Vue 3项目、配置开发环境、路径别名、Vue插件、代理、多环境构建与调试的已审核文章,帮助读者完成从初始化到日常开发的配置。

20

2026.10.28

Vite 项目目录怎么看
Vite 项目目录怎么看

Vite项目目录专题汇集入口文件、src源码、public静态资源、路径别名、项目根目录和构建输出目录相关的已审核文章,帮助读者理解各文件夹的用途与引用方式。

0

2026.10.28

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

120

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn