讲师中心 微信公众号

工具推荐

视频效率加速
updream

一键生成高质量推广成片

立刻MV
立刻MV

低成本歌曲 MV、视频生成

剧云
剧云

中文短剧剧本制作平台

Seko
Seko

AI短剧一键生成成片

关于数据导出超时的问题

小宇小哥_1334

小宇小哥_1334

发布时间:2016-08-15 16:49:57

|

1682人浏览过

|

来源于php中文网

原创

实际工作中,我们经常导出报表的需求,当导出数据量过大的时候,经常会遇到超时和内存溢出的问题。
解决方案一

超时可用: set_time_limit(0) 解决。
内存溢出可用: ini_set('memory_limit', '自定义内存')。

解决方案二

优化程序,利用数据库或文件来缓存中间结果。

解决方案三

利用Ajax分多次请求,写入文件,下载文件,效果如上图(效果图为gif,无法上传,请用下面链接查看)。

(方案三)为大家提供一个Demo

设计思路

1. 我们将其拆成100次请求,请求成功,进度条前进1%。
2. 每次请求都需要写入文件,然后对文件进行追加写入。
3. 当文件写入完毕后,显示下载按钮 ,点击下载即可。

功能点

1. 两种进度条样式。
2. Jquery Ajax。
3. 数据写入CSV。
4. 下载文件。

页面样式:Bootstrap。

代码如下:<?php <br />     /**<br>      * 导出CSV文件<br>      * @param array  $data                  数据<br>      * @param array  $header_data 首行数据<br>      * @param string $file_name         文件名称<br>      * @param int      $type                    类别<br>      * @return string<br>      */<br>     function _export_csv($data = [], $header_data = [], $file_name = '', $type = 0)<br>     {<br>         $fp = fopen($file_name, 'a+');<br>         if (($type != 1) && !empty($header_data)) {<br>             foreach ($header_data as $key => $value) {<br>                 $header_data[$key] = iconv('utf-8', 'gbk', $value);<br>             }<br>             fputcsv($fp, $header_data);<br>         }<br>         $num = 0;<br>         //每隔$limit行,刷新一下输出buffer,不要太大,也不要太小<br>         $limit = 100000;<br>         //逐行取出数据,不浪费内存<br>         $count = count($data);<br>         if ($count > 0) {<br>             for ($i = 0; $i                  $num++;<br>                 //刷新一下输出buffer,防止由于数据过多造成问题<br>                 if ($limit == $num) {<br>                     ob_flush();<br>                     flush();<br>                     $num = 0;<br>                 }<br>                 $row = $data[$i];<br>                 foreach ($row as $key => $value) {<br>                     $row[$key] = iconv('utf-8', 'gbk', $value);<br>                 }<br>                 fputcsv($fp, $row);<br>             }<br>         }<br>         fclose($fp);<br>     }<br><br>     /**<br>      * 下载文件<br>      * @param string $file_url 文件地址<br>      * @return string<br>      */<br>     function _download_file ($file_url = '')<br>     {<br>         if (!isset($file_url) || trim($file_url)=='') {<br>             die('File URL is empty.');<br>         }<br>         if (!file_exists($file_url)) {<br>             die('File does not exist.');<br>         }<br>         $file_name = 'down_'.date('YmdHis', time());<br>         $file_type = fopen($file_url,'r'); //打开文件<br>         //输入文件标签<br>         header("Content-type: application/octet-stream");<br>         header("Accept-Ranges: bytes");<br>         header("Accept-Length: ".filesize($file_url));<br>         header("Content-Disposition: attachment; filename=".$file_name);<br>         //输出文件内容<br>         echo fread($file_type, filesize($file_url));<br>         fclose($file_type);<br>     }<br><br>     //以后是逻辑代码,大家可以根据自己的需求进行编写。<br>         $path = '文件的绝对地址'; //path 是存放文件的绝对地址。<br>     if (isset($_POST['start'])) {<br>           //每一个单独的请求,要保证文件名是唯一的,因为后面要继续进行追加。<br>               $file_name = 'demo.csv';<br>         //获取数据,根据自己的业务逻辑,去数据库获取数据。<br>         $data        = [];<br>         $header_data = ['执行时间', '随机数']; //首行数据,表头<br>         //模拟数据如下:<br>         for ($i=0; $i             $data[$i]['time'] = date('Y-m-d H:i:s', time());<br>             $data[$i]['num']  = mt_rand(1000,9999);<br>         }<br>         $type = ($_POST['start'] != '0') ? 1 : 0 ;<br>         //开始将数据写入到文件中<br>         _export_csv($data, $header_data, $path.$file_name, $type);<br>         //假设第100次 写入完毕,那么就可以进行下载文件啦。<br>         //可以先获取需要导出的总量,然后根据实际情况进行拆分数据,每次获取成功,进度条会显示进度。<br>         if ($_POST['start'] == 100) {<br>             die(json_encode(['code' => 'ok', 'file_path' => '/index.php?op=down&f='.$file_name]));<br>         } else {<br>             die(json_encode(['code' => 'no']));<br>         }<br>     }<br><br>     //简单的导出逻辑,可根据实际情况,进行开发。<br>     if (($_GET['op'] == 'down') && !empty($_GET['f'])) {<br>             _download_file($path.$_GET['f']);<br>             exit;<br>     }<br> ?><br>nbsp;html><br><br>     <br>       <meta> <br>         <meta> <br>         <meta> <br>         <meta> <br>         <meta> <br>         <!-- 新 Bootstrap 核心 CSS 文件 --><br>         <link> <br>         <!-- jQuery --><br>         <script></script><br>         <!-- Title --><br>         <title>Demo</title> <br>     <br>     <br>         <div> <br>             <div> <br>                 <div> <br>                     <a>导出CSV文件</a><br>                     <a>下载文件</a><br>                 </div> <br>             </div> <br><br>             <div> <br>                 <div> <br>                     <div> <br>                       <div> <br>                       </div> <br>                     </div> <br>                 </div> <br>             </div> <br><br>             <div> <br>                 <div> <br>                     <div> <br>                       <div> <br>                         60%<br>                       </div> <br>                     </div> <br>                 </div> <br>             </div> <br>         </div> <br>     <script><br /> $(document).ready(function () {<br /> //导出CSV文件<br /> $("#export_file").click(function(){<br /> _get_data(0);<br /> });<br /> <br /> //获取数据的方法<br /> function _get_data(start)<br /> {<br /> $.ajax({<br /> type: "POST",<br /> url : 'index.php',<br /> data: {<br /> 'start' : start<br /> },<br /> async: true,<br /> dataType: "json",<br /> beforeSend: function () {<br /> $("#download_file").css('display', 'none');<br /> $("#process_one").show();<br /> $("#process_two").show();<br /> },<br /> success: function (result) {<br /> if (result.code == 'ok') {<br /> $("#download_file").show();<br /> $("#download_file").attr("href", result.file_path);<br /> $("#process_one").css('display', 'none');<br /> $("#process_two").css('display', 'none');<br /> } else {<br /> start ++;<br /> _get_data(start);<br /> $("#progress-bar-one").css("width", start+'%');<br /> $("#progress-bar-two").css("width", start+'%');<br /> $("#progress-bar-two").html(start+'%');<br /> }<br /> },<br /> error: function() {<br /> alert("Server Error~");<br /> }<br /> });<br /> }<br /> });<br /> </script><br>     <br>温馨提示:
Demo 仅供参考,具体开发,请根据需求,严谨处理。

Thanks ~

来源:http://mp.weixin.qq.com/s?__biz=MjM5NDM4MDIwNw==&mid=2448834649&idx=1&sn=3be1ef996a9fcf3f4082decd6434a048#rd

更多【干货分享】,请关注我的个人订阅号。

关于数据导出超时的问题

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

相关专题

更多
GoFrame框架Web开发与路由中间件
GoFrame框架Web开发与路由中间件

本专题聚焦GoFrame框架的Web开发,拆解路由注册与匹配规则、请求参数获取、参数校验与中间件执行顺序,说明统一响应、JWT鉴权、文件上传与接口文档生成的落地方式,并补充优雅重启与测试实践。

0

2026.11.17

GoFrame框架安装与gf命令行工具
GoFrame框架安装与gf命令行工具

本专题围绕GoFrame框架的安装与工具链配置展开,讲清Go版本要求、gf命令行的安装方式、代理镜像与依赖准备,说明项目初始化、热编译、交叉编译打包的做法,并整理安装阶段的常见报错与验证步骤。

20

2026.11.17

GoFrame框架零基础入门
GoFrame框架零基础入门

本专题整理GoFrame框架的入门知识,从模块化设计理念、环境准备到跑通第一个Web服务,讲清目录分层、配置加载、日志与中间件的用法,并对比Gin、Go-Zero的差异,帮助Go开发者建立整体认知。

0

2026.11.17

SQLAlchemy 一对多关系怎么建立
SQLAlchemy 一对多关系怎么建立

SQLAlchemy 一对多关系怎么建立?本专题整理父子表外键、relationship 双向映射、关联查询、级联删除和加载优化等相关文章,帮助你理解并实现常见的 ORM 关系建模。

0

2026.11.17

SQLAlchemy 如何增删改查
SQLAlchemy 如何增删改查

SQLAlchemy 如何增删改查?本专题整理 ORM 新增记录、条件查询、更新和删除、Session 事务提交与批量处理等实用文章,帮助你掌握 Python 数据库操作流程。

0

2026.11.17

SQLAlchemy ORM 模型怎么写
SQLAlchemy ORM 模型怎么写

SQLAlchemy ORM 模型怎么写?本专题整理模型类定义、Mapped 字段映射、主键与约束、表结构创建和常见报错的相关文章,帮助你从基础配置到实际建模逐步掌握 SQLAlchemy。

0

2026.11.17

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

180

2026.11.12

Go-Zero安装与goctl环境配置教程
Go-Zero安装与goctl环境配置教程

本专题围绕Go-Zero的安装与工具链配置展开,讲清Go版本要求、goctl安装方式、代理镜像、protoc依赖与环境变量设置,说明多版本共存、升级回退与CI流水线安装的做法,并整理安装阶段的常见报错与验证步骤。

120

2026.11.12

Go-Zero零基础入门教程
Go-Zero零基础入门教程

本专题整理Go-Zero的入门知识,从框架定位、环境准备到跑通第一个API服务,讲清目录分层、配置加载、日志与中间件的基本用法,并对比Gin、Kratos的差异,帮助Go开发者建立整体认知,判断它是否适合当前项目。

100

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
thinkphp基础介绍和yii2基础介绍
thinkphp基础介绍和yii2基础介绍

共10课时 | 2.6万人学习

兄弟连ThinkPHP3.1基础视频教程
兄弟连ThinkPHP3.1基础视频教程

共30课时 | 6.8万人学习

Uniapp简爱读书项目开发--第一季
Uniapp简爱读书项目开发--第一季

共36课时 | 17万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn