讲师中心 微信公众号
AI工具推荐 视频效率加速

ThinkPHP怎么从Excel或CSV批量导入数据库

胖杰同学_2451

胖杰同学_2451

发布时间:2026-10-22 15:18:30

|

136人浏览过

|

来源于php中文网

原创

ThinkPHP批量导入核心是建立可识别、分发、校验、回滚的统一流程:用魔数识别真实文件类型(非后缀),CSV用fgetcsv流式读取,Excel用PhpSpreadsheet按格式显式加载,统一字段映射、清洗、分批事务入库并清理临时文件。

thinkphp怎么从excel或csv批量导入数据库

ThinkPHP 实现 Excel 或 CSV 批量导入数据库,核心不是“选哪个库”,而是建立一套可识别、可分发、可校验、可回滚的统一流程。关键在于:不依赖文件后缀,用魔数判断真实类型;不混写解析逻辑,按格式拆分处理;不一次加载全量数据,用流式或分批控制内存;不直插原始值,必须字段映射+清洗+事务入库。

真实类型识别:别信后缀和 MIME,看文件头 4 字节

用户可能把 CSV 改成 .xlsx 后缀,或上传无扩展名文件。仅靠 $_FILES['file']['type'] 或 pathinfo($file, PATHINFO_EXTENSION) 会出错。正确做法是读取文件前 4 字节做魔数比对:

  • efbbbf → UTF-8 BOM 开头,判定为 CSV(常见于 Excel 另存为 CSV)
  • d0cf11e0 → 标准 .xls(OLE 复合文档结构)
  • 504b0304 → ZIP 格式开头,可能是 .xlsx 或 ZIP 包裹的 CSV(需进一步检查内部文件列表或扩展名辅助判断)

代码片段示例:

$handle = fopen($filePath, 'rb');<br>$magic = bin2hex(fread($handle, 4));<br>fclose($handle);<br>return match($magic) {<br>  'efbbbf' => 'csv',<br>  'd0cf11e0' => 'xls',<br>  '504b0304' => $this->isXlsxByExtension($filePath) ? 'xlsx' : 'csv',<br>};

CSV 导入:优先用 fgetcsv 流式读取,尤其大文件

避免 file_get_contents + str_getcsv 一次性载入内存。fgetcsv 支持按行读取、自动处理引号与逗号嵌套,更安全高效:

  • 打开文件后,先调用一次 fgetcsv() 跳过表头行
  • 循环中每次获取一行数组,用 array_filter($row) 排除全空行
  • 建立字段映射(如 Excel 表头“手机号”→数据库字段 mobile),再提取对应索引值
  • 每 500 行封装一次批量插入,用 PDO 预处理语句执行,开启事务保障一致性

注意:若 CSV 是 GBK 编码,需用 stream_filter_append($handle, 'convert.iconv.GBK/UTF-8') 转码,否则中文入库乱码。

立即学习“PHP免费学习笔记(深入)”;

Knowledge Graph - Csv Graph Loader Generator
Knowledge Graph - Csv Graph Loader Generator

从 CSV 数据集生成图数据库加载器和三元组映射。将表格 CSV 数据转换为图数据库可直接使用的节点、边和三元组。

下载

Excel 导入:用 PhpSpreadsheet,但要显式指定格式+跳过空行

不要直接用 IOFactory::load(),它会自动探测格式,易误判且慢。应根据魔数结果明确创建 Reader:

  • IOFactory::createReader('Xls') 处理 .xls
  • IOFactory::createReader('Xlsx') 处理 .xlsx

读取时启用迭代器,逐行扫描并过滤空行:

  • 调用 $worksheet->getRowIterator() 获取行迭代器
  • 对每行调用 $row->getCellIterator(),并设 setIterateOnlyExistingCells(false) 确保读取空白单元格
  • 用 $cell->getValue() !== null 判断是否为空单元格,整行为空则跳过

表头中文需映射为数据库字段名,例如 “订单编号” → order_sn,建议配置映射规则数组或从数据库字段注释自动匹配。

统一入库:校验、清洗、分批、清理一步到位

无论 CSV 还是 Excel,解析后的每行数据都走同一套业务逻辑:

  • 字段校验:手机号是否符合正则、邮箱格式、必填项是否为空
  • 数据清洗:去除首尾空格、转换“是/否”为 1/0、日期字符串转时间戳
  • 分批事务插入:每 1000 行启一个事务,成功则提交,失败则回滚并记录错误行号
  • 导入完成立即删除临时文件:unlink($filePath),防止磁盘占满
  • 返回结构化 JSON:{ "success": true, "total": 2356, "inserted": 2350, "failed": 6, "errors": [...] }

不复杂但容易忽略。

相关文章

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

4261

2024.04.10

thinkphp性能怎么样
thinkphp性能怎么样

thinkphp 是一款高性能的 php 框架,具备缓存机制、代码优化、并行处理和数据库优化等优势。官方性能测试显示,它每秒可处理超过 10,000 个请求,实际应用中被广泛用于京东商城、携程网等大型网站和企业系统。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1380

2024.04.10

ThinkPHP6后台管理系统开发与RBAC权限控制实践
ThinkPHP6后台管理系统开发与RBAC权限控制实践

本专题围绕 ThinkPHP6 在后台管理系统开发中的应用展开,重点讲解基于 RBAC 模型的权限控制实现方案。内容涵盖管理员角色设计、菜单权限分配、接口鉴权、中间件拦截机制以及后台模块化开发思路。同时结合实际案例,讲解如何构建完整的后台管理系统,包括用户管理、权限管理与操作日志记录,帮助开发者搭建安全、可扩展的企业级后台系统。

603

2026.03.20

ThinkPHP API接口开发与前后端分离实战
ThinkPHP API接口开发与前后端分离实战

本专题围绕ThinkPHP在前后端分离项目中的 API 开发展开,系统讲解 RESTful 接口设计规范、统一返回结构、参数验证与异常处理机制。内容涵盖 Token 鉴权、跨域处理、接口版本管理以及接口文档生成方案。通过完整项目案例,帮助开发者构建规范、高效、易维护的后端接口服务体系。

384

2026.03.20

ThinkPHP ORM模型关系与数据库操作优化实践
ThinkPHP ORM模型关系与数据库操作优化实践

本专题聚焦ThinkPHP中 ORM 模型的高级用法与数据库操作优化技巧。内容包括一对一、一对多、多对多关系定义与使用、关联预加载、查询构建器优化以及复杂查询封装方法。同时结合实际业务场景,讲解如何避免 N+1 查询问题、提升数据库访问效率,帮助开发者编写高性能的数据访问层代码。

259

2026.03.20

ThinkPHP模型详解
ThinkPHP模型详解

本专题整合了ThinkPHP模型相关内容,阅读专题下面的文章了解更多详细介绍。

278

2026.03.26

ThinkPHP表单验证与数据安全处理实战
ThinkPHP表单验证与数据安全处理实战

本专题聚焦 ThinkPHP 在表单处理中的验证与安全机制,系统讲解验证器使用、自定义规则、场景验证以及错误提示处理。内容涵盖 XSS 防护、SQL 注入防御、数据过滤与输入校验等关键安全措施。通过实际案例,帮助开发者构建安全可靠的数据处理流程。

241

2026.03.30

ThinkPHP日志系统设计与异常监控实践
ThinkPHP日志系统设计与异常监控实践

本专题围绕 ThinkPHP 日志系统展开,深入讲解日志记录机制、日志级别划分、日志文件管理以及自定义日志通道配置。内容涵盖异常捕获、错误追踪、调试信息输出以及日志分析方法。通过实战讲解,帮助开发者提升系统问题定位能力与运维效率。

468

2026.03.30

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
墨刀帮助中心
墨刀帮助中心

共0课时 | 0人学习

MyEclipse学习中心
MyEclipse学习中心

共0课时 | 0人学习

Apache Subversion 官方手册
Apache Subversion 官方手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn