讲师中心 微信公众号
AI工具推荐 视频效率加速

怎样用Python处理CSV文件?pandas读写数据完整教程

星婷姑娘_1113

星婷姑娘_1113

发布时间:2025-08-07 12:38:01

|

568人浏览过

|

来源于php中文网

原创

要掌握用pandas处理csv文件,关键在于熟练运用读取、清洗、写入等核心操作。一、使用pd.read_csv()读取数据时,注意指定编码、分隔符、跳过行等参数以应对常见问题;二、通过df.head()、df.info()等方法查看数据,并进行重命名列、类型转换、缺失值处理等清洗操作;三、利用df.to_csv()保存数据时,可控制索引、编码和分隔符;四、进阶操作如批量合并多个csv文件时,可用os模块配合循环与pd.concat()实现。整个流程涵盖从基础读写到复杂整合的典型应用场景。

怎样用Python处理CSV文件?pandas读写数据完整教程

处理CSV文件是数据分析中非常常见的任务,而Python的

pandas
库无疑是完成这项工作的利器。如果你需要读取、清洗、分析或保存CSV数据,用好
pandas
就能事半功倍。

怎样用Python处理CSV文件?pandas读写数据完整教程

下面从最基础的开始,带你一步步掌握使用

pandas
处理CSV文件的关键操作。


一、读取CSV文件:
read_csv()
的基本用法

处理CSV的第一步就是把它读进程序里。

pandas.read_csv()
是最常用的函数,能轻松加载数据到DataFrame对象中。

立即学习“Python免费学习笔记(深入)”;

怎样用Python处理CSV文件?pandas读写数据完整教程
import pandas as pd
df = pd.read_csv('data.csv')

但实际使用中,你可能会遇到各种问题,比如:

  • 文件路径不对,报错找不到文件;
  • 编码格式不匹配(比如含有中文),导致乱码;
  • 数据中有特殊符号或缺失值影响解析;

这时候就需要加一些参数来辅助读取:

怎样用Python处理CSV文件?pandas读写数据完整教程
  • encoding='utf-8'
    指定编码;
  • sep=','
    指定分隔符(默认是逗号);
  • header=0
    表示第一行为列名;
  • na_values=['NA', 'null']
    自定义哪些内容被认为是空值。

举个例子,如果CSV文件是用制表符

\t
分隔的,而且前两行是说明文字,数据从第三行开始:

df = pd.read_csv('data.tsv', sep='\t', skiprows=2)

二、查看和清理数据:初步处理技巧

数据读进来之后,先别急着分析,先看看长什么样。常用方法有:

  • df.head()
    查看前几行;
  • df.info()
    查看每列的数据类型和非空数量;
  • df.describe()
    查看数值型列的统计信息;

常见问题包括:

python-parallelization
python-parallelization

将顺序 Python 代码转换为并行/并发实现,用于在需要并行化 Python 代码、提升性能时使用。

下载
  • 列名不合适,想重命名;
  • 某些列是字符串但其实是数字;
  • 存在缺失值需要处理;

可以这样操作:

# 重命名列名
df.rename(columns={'old_name': 'new_name'}, inplace=True)

# 转换某一列为数值型
df['column_name'] = pd.to_numeric(df['column_name'], errors='coerce')

# 删除全为空的列
df.dropna(axis=1, how='all', inplace=True)

这些操作虽然简单,但往往能解决很多“数据不能用”的问题。


三、写入CSV文件:把结果保存下来

处理完数据后,当然要把结果保存下来。

to_csv()
方法可以将DataFrame保存为CSV文件。

df.to_csv('output.csv', index=False)

几个实用参数:

  • index=False
    不保存索引;
  • encoding='utf-8-sig'
    避免Excel打开中文乱码;
  • sep=','
    可以改回其他分隔符,如
    \t
    生成TSV;

如果你想只保存部分列,也可以先筛选再保存:

df[['col1', 'col2']].to_csv('selected_data.csv', index=False)

四、进阶技巧:批量处理多个CSV文件

有时候你需要处理多个CSV文件,比如合并多个月份的销售数据。

可以结合

os.listdir()
和循环来实现:

import os
import pandas as pd

files = [f for f in os.listdir('.') if f.endswith('.csv')]
combined = pd.DataFrame()

for file in files:
    df = pd.read_csv(file)
    combined = pd.concat([combined, df], ignore_index=True)

combined.to_csv('combined.csv', index=False)

注意几点:

  • 确保所有文件结构一致(列名、顺序等);
  • 处理大文件时考虑内存限制;
  • 可以加进度条提升体验(如用
    tqdm
    库);

基本上就这些了。

pandas
处理CSV的核心流程就是读取 → 清洗/转换 → 写出。掌握了这些,大多数日常需求都能搞定。

热门AI工具

更多
立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

相关专题

更多
Python 时间序列分析与预测
Python 时间序列分析与预测

本专题专注讲解 Python 在时间序列数据处理与预测建模中的实战技巧,涵盖时间索引处理、周期性与趋势分解、平稳性检测、ARIMA/SARIMA 模型构建、预测误差评估,以及基于实际业务场景的时间序列项目实操,帮助学习者掌握从数据预处理到模型预测的完整时序分析能力。

320

2025.12.04

Python 数据清洗与预处理实战
Python 数据清洗与预处理实战

本专题系统讲解 Python 在数据清洗与预处理中的核心技术,包括使用 Pandas 进行缺失值处理、异常值检测、数据格式化、特征工程与数据转换,结合 NumPy 高效处理大规模数据。通过实战案例,帮助学习者掌握 如何处理混乱、不完整数据,为后续数据分析与机器学习模型训练打下坚实基础。

252

2026.01.31

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

511

2026.04.13

数据类型有哪几种
数据类型有哪几种

数据类型有整型、浮点型、字符型、字符串型、布尔型、数组、结构体和枚举等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2851

2023.10.31

php数据类型
php数据类型

本专题整合了php数据类型相关内容,阅读专题下面的文章了解更多详细内容。

534

2025.10.31

c语言 数据类型
c语言 数据类型

本专题整合了c语言数据类型相关内容,阅读专题下面的文章了解更多详细内容。

482

2026.02.12

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

549

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1678

2024.03.01

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn