讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 Pandas 中正确显示单条实时进度条(避免重复渲染)

轻明大大_1948

轻明大大_1948

发布时间:2026-07-31 22:44:23

|

328人浏览过

|

来源于php中文网

原创

如何在 Pandas 中正确显示单条实时进度条(避免重复渲染)

本文详解为何自定义 print(..., end='\r') 进度条在 df.apply() 中会重复出现多行,以及如何通过 tqdm 实现稳定、高效、jupyter 友好的单行动态进度指示。

本文详解为何自定义 print(..., end='\r') 进度条在 df.apply() 中会重复出现多行,以及如何通过 tqdm 实现稳定、高效、jupyter 友好的单行动态进度指示。

在使用 pandas.DataFrame.apply() 处理大规模数据(如 5000+ 行)时,若手动实现基于 print(..., end='\r') 的进度条(如题中 progressBar() 函数),极易出现多条进度条叠加显示(见截图),而非预期的单条实时更新。根本原因在于:Jupyter 的输出缓冲机制与 apply() 的内部执行逻辑不兼容——apply 在底层可能分块调用、触发多次内核刷新,而 \r 仅作用于当前输出行;当新 print 调用发生在不同内核消息周期时,旧行未被覆盖,新行便另起一行渲染,导致“进度条堆积”。

手动调用 sys.stdout.flush() 不仅无法可靠解决该问题(因 Jupyter 不完全遵循标准 stdout 行为),还会显著拖慢执行速度,违背进度条本应轻量、无侵入的设计初衷。

✅ 正确解法:使用专为交互式环境优化的 tqdm 库。它原生支持 Jupyter Notebook/Lab,提供线程安全、自动刷新、动态长度适配的进度条,并深度集成 pandas:

Pandas Linux版 2.3.3
Pandas Linux版 2.3.3

Pandas 2.3.3 历史版本下载,来自 PyPI 官方发布,适合旧项目兼容、数据分析脚本复现和指定环境安装。

下载
from tqdm.notebook import tqdm
import pandas as pd

# 启用 pandas 扩展(只需一次)
tqdm.pandas(desc="Calculating")

# 定义处理函数(无需维护状态或手动打印)
def myf(row):
    row['1'] = 100
    return row  # 注意:apply 需要返回值以构建结果

# 替换 df.apply() 为 progress_apply()
df = pd.DataFrame(index=range(0, 5000), columns=['1','2','3','4','5'])
df = df.progress_apply(myf, axis=1)  # ✅ 单条、平滑、实时更新的进度条

⚠️ 关键注意事项:

  • 必须使用 from tqdm.notebook import tqdm(非 tqdm.tqdm),否则在 Jupyter 中可能退化为文本模式或报错;
  • tqdm.pandas() 是一次性注册步骤,之后所有 progress_apply() 调用均自动启用进度条;
  • 若函数需修改原 DataFrame 而非返回新行(如 inplace=True 场景),建议改用 df.loc[:, '1'] = 100 等向量化操作——既免去进度条需求,性能也提升数十倍;
  • progress_apply() 返回新 DataFrame,如需原地修改,请显式赋值(如 df = df.progress_apply(...))。

总结:避免在 Jupyter 中自行实现 \r 进度条;拥抱 tqdm.notebook + progress_apply() 组合,可获得开箱即用、稳定可靠、专业级的可视化进度反馈。

热门AI工具

更多
二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

252

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

671

2026.04.13

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

100

2026.10.22

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

60

2026.10.22

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

60

2026.10.22

Gradle怎么构建Java项目
Gradle怎么构建Java项目

本专题介绍Gradle Java项目构建方法,涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查,帮助你理解各阶段的任务关系,逐步完成项目构建。

20

2026.10.22

PHP时间戳漏洞修复教程
PHP时间戳漏洞修复教程

本专题汇总PHP常见时间戳漏洞,包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等,并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案,帮助开发者快速排查和加固时间相关代码。

60

2026.10.22

Golangci-lint配置文件与规则设置
Golangci-lint配置文件与规则设置

本专题聚焦Golangci-lint YAML配置文件,讲清运行参数、规则启停、目录排除、问题过滤及严重级别设置,便于团队统一检查标准。

20

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Pandas 官方文档与用户指南
Pandas 官方文档与用户指南

共0课时 | 0人学习

Pandas 教程
Pandas 教程

共15课时 | 1.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn