讲师中心 微信公众号
AI工具推荐 视频效率加速

ThinkPHP导入Excel如何提高速度 优化方法解析

落静姑娘_3553

落静姑娘_3553

发布时间:2026-07-10 13:13:04

|

821人浏览过

|

来源于php中文网

原创

ThinkPHP导入Excel速度慢的根本原因是默认加载器不适用于大数据场景,应改用Box/Spout流式解析器,配合临时文件持久化、禁用日期格式化、逐批插入与手动GC回收,并优先采用CSV格式上传以控制内存。

thinkphp导入excel如何提高速度 优化方法解析

ThinkPHP导入Excel速度慢,常表现为10万行数据耗时几分钟、内存爆掉、PHP进程被kill或超时中断——这不是代码写法有误,而是默认加载方式与大数据场景严重 mismatch。

替换默认加载器:弃用IOFactory::load(),改用流式解析器

第一步:卸载phpspreadsheet(若已安装),执行:composer remove phpoffice/phpspreadsheet

第二步:安装轻量级流式解析库box/spout:composer require box/spout:^4.0。它不依赖DOM解析,不加载整表进内存,5MB Excel仅占3MB内存峰值。

第三步:在控制器中引入并初始化:use Box\Spout\Reader\Common\Creator\ReaderFactory; → $reader = ReaderFactory::create(Type::XLSX);

立即学习“PHP免费学习笔记(深入)”;

【必须关闭样式解析】 Spout默认不读样式和公式,但若Excel含大量条件格式或宏,仍可能触发隐藏开销。调用$reader->setShouldFormatDates(false)禁用日期自动转换,避免内部反复调用Carbon实例。

上传路径处理:绕过临时文件清理陷阱

ThinkPHP上传后会自动清理$_FILES['file']['tmp_name']路径,而IOFactory::load()常在此之后才调用,导致File does not exist错误。

方法一:立即保存临时文件到持久目录
调用$file->move(ROOT_PATH . 'public' . DS . 'uploads', true),返回真实路径$realPath,后续全部基于该路径操作。

方法二:直接使用资源流(推荐)
$fp = fopen($file->getRealPath(), 'r'); → $reader->open($fp);。此方式跳过文件系统IO,规避权限与路径编码问题。

excel-clean
excel-clean

Excel 数据清洗——去重、填补缺失值、格式转换。

下载

【严禁使用$file->getPathname()】 它返回客户端原始路径(如C:\Users\abc.xlsx),服务端根本不可访问,一用即报错。

逐行解析+批量写入:控制内存与数据库压力

① 打开文件后,立即跳过表头:$reader->skipRows(1);

② 使用foreach ($reader->getSheetIterator() as $sheet)遍历工作表,对每个表单独处理。

③ 每500行组装一次批量插入SQL:Db::name('user')->insertAll($batchData);,避免单条INSERT压垮连接池。

④ 每批处理完手动释放变量:unset($batchData); gc_collect_cycles();。PHP 8.3对Spout对象的GC滞后明显,不主动回收会导致内存持续上涨。

这一步操作起来很简单,直接把$batchData = []放在循环外,每次array_push($batchData, $row)即可。但注意:若Excel列顺序与数据库字段不一致,必须提前做字段映射,否则insertAll会因键名缺失报错。

前端预处理:让Excel转CSV再提交

方法一:前端用SheetJS转换
引入xlsx.full.min.js → const csv = XLSX.utils.sheet_to_csv(workbook.Sheets[workbook.SheetNames[0]]); → 以text/csv类型提交。

方法二:后端接收后直连fgetcsv
$handle = fopen($file->getRealPath(), 'r'); while (($row = fgetcsv($handle)) !== false) { ... }。100万行内存恒定在12KB以内。

注意CSV BOM头:若前端未strip BOM,需先$firstLine = fgets($handle); if (substr($firstLine, 0, 3) === "\xEF\xBB\xBF") { /* 跳过 */ },否则首列字段名带乱码。

热门AI工具

更多
咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

10544

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

6181

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2115

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

3908

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

4614

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

3611

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5157

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4042

2023.11.13

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

80

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn