讲师中心 微信公众号
AI工具推荐 视频效率加速

Python文件批量处理_目录扫描解析【指导】

冬枫小哥_4941

冬枫小哥_4941

发布时间:2026-01-02 18:14:02

|

777人浏览过

|

来源于php中文网

原创

Python批量处理文件推荐用pathlib遍历(如Path(".").rglob("*.txt")),os.walk适合深层嵌套统计,需注意路径准确、异常控制、编码指定(utf-8)、覆盖防护及进度提示。

python文件批量处理_目录扫描解析【指导】

Python批量处理文件,核心是用 os 或 pathlib 扫描目录结构,再结合具体逻辑(如读取、重命名、过滤、转换)逐个操作文件。关键不是写得复杂,而是路径准确、异常可控、逻辑清晰。

用 pathlib 遍历所有文件(推荐新手)

pathlib 是 Python 3.4+ 内置模块,语法简洁、跨平台友好,比 os.walk 更易读。

  • 扫描当前目录下所有 .txt 文件:
      from pathlib import Path
      for f in Path(".").rglob("*.txt"):
        if f.is_file():
          print(f.name, f.parent)
  • 只扫一级子目录(不递归):
      for f in Path("data").iterdir():
        if f.is_file() and f.suffix == ".csv":
          process_csv(f)

用 os.walk 处理深层嵌套结构

需要明确获取“根目录、子目录名列表、文件名列表”三元组时,os.walk 更直接,尤其适合按层级做统计或跳过特定文件夹。

Python Testing
Python Testing

Python 测试速查:运行 pytest、使用 mock/patch、参数化、fixtures、异步、覆盖率测试。

下载
  • 跳过名为 "__pycache__" 或 "temp" 的目录:
      import os
      for root, dirs, files in os.walk("project"):
        dirs[:] = [d for d in dirs if d not in ("__pycache__", "temp")]
        for file in files:
          if file.endswith(".log"):
            archive_log(os.path.join(root, file))

安全读写:避免覆盖、编码错误和权限问题

批量操作最常出错的不是逻辑,而是路径拼错、中文乱码、静默覆盖。

立即学习“Python免费学习笔记(深入)”;

  • 读文本文件务必指定 encoding,尤其 Windows 下默认 cp1252:
      with open(f, encoding="utf-8") as fp:
        content = fp.read()
  • 写入前检查目标路径是否存在,避免 OSError:
      output = f.with_suffix(".clean.csv")
      output.parent.mkdir(parents=True, exist_ok=True)
      output.write_text(clean_data, encoding="utf-8")
  • 重命名/移动前加 exists() 判断,防止意外覆盖:
      if not new_path.exists():
        f.rename(new_path)
      else:
        print(f"跳过 {f.name}:目标已存在")

加进度提示与简单日志(实用但不啰嗦)

处理几百个文件时,卡住或没反应容易让人怀疑脚本挂了。一行 print 或 tqdm 就够用。

  • 基础计数提示(无需装包):
      files = list(Path("input").rglob("*.json"))
      for i, f in enumerate(files, 1):
        process(f)
        print(f"\r处理中: {i}/{len(files)}", end="")
  • 想更专业点,pip install tqdm 后:
      from tqdm import tqdm
      for f in tqdm(files, desc="解析 JSON"): process(f)

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

1975

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2702

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

936

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

3019

2025.09.10

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

2470

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

5703

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

7242

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

3487

2025.07.23

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

80

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn