讲师中心 微信公众号
AI工具推荐 视频效率加速

Laravel命令行怎么循环处理大量业务数据

轻强姑娘_7203

轻强姑娘_7203

发布时间:2026-08-21 14:59:18

|

718人浏览过

|

来源于php中文网

原创

Laravel大批量数据处理应分场景:只读用cursor()逐行低内存遍历;写入用chunkById()分批+事务;封装为Artisan命令+Supervisor守护;批量写入用upsert()或原生SQL。

laravel命令行怎么循环处理大量业务数据

在 Laravel 命令行中循环处理大量业务数据,核心是避免内存溢出、防止超时、保障数据一致性,不能简单写 while(true) 或用 get() 全量加载。正确做法是结合分块查询、惰性遍历、事务控制和进程守护来构建稳定可靠的后台任务。

用 cursor() 逐行读取(只读场景最省内存)

适合导出、统计、发送通知等不修改数据库的操作。它不缓存批次,数据库连接保持,每轮只取一条,内存占用极低。

  • 直接在模型上调用:User::where('status', 'active')->cursor()
  • 配合 each() 或 foreach 处理:
    User::cursor()->each(function ($user) {
      // 发送邮件、记录日志、生成 CSV 行
      Mail::to($user)->send(new WeeklyReport());
    });
  • 注意:不可在循环中调用 $user->update(),会导致游标失效或数据错乱

用 chunkById() 分批更新(需写入且数据量大)

比 chunk() 更安全,基于主键范围分页,不会因数据增删导致漏处理或重复处理,适合批量更新、状态变更等操作。

laravel-specialist
laravel-specialist

精通 Laravel 10+,遵循现代 PHP 实践的 Laravel 专家。擅长优雅语法、Eloquent ORM、队列系统及企业级特性...

下载
  • 按每 500 条一批处理订阅记录:
    Subscription::where('status', 'pending')
      ->chunkById(500, function ($subscriptions) {
        foreach ($subscriptions as $sub) {
          $sub->update(['status' => 'processed']);
        }
      });
  • 如需事务保障,可在闭包内包裹 DB::transaction(),但建议单批事务不宜过大(例如不超过 100 条更新)
  • 若中途想退出,返回 false 即可中断后续分块

封装为 Artisan 命令 + Supervisor 守护运行

命令行脚本不能依赖 Web 请求生命周期。应将循环逻辑抽离到服务类,通过自定义 Artisan 命令触发,并用 Supervisor 保证常驻与自动恢复。

  • 创建命令:php artisan make:command ProcessIncomeData
  • 在 handle() 中调用服务类的无限循环方法(含 sleep(10) 防止 CPU 占满)
  • 用 Supervisor 管理进程:
    配置 autostart=true、autorestart=true、startsecs=3,确保崩溃后秒级重启
  • 务必在循环体中捕获异常并记录日志,避免一次错误导致整个进程退出

配合 upsert() 或原生 SQL 批量写入

如果循环中要插入/更新成千上万条记录,千万别在 foreach 里反复调用 save() 或 insert() —— 这会生成 N 条 SQL,慢且易超时。

  • 收集一批数据(例如 500 条),统一调用 Income::upsert($batch, ['transaction_id'], ['amount', 'updated_at'])
  • 确保 transaction_id 字段有唯一索引,否则 upsert 失效
  • 对纯数值更新(如所有用户积分 +10),直接写原生 SQL:
    DB::statement("UPDATE users SET points = points + 10 WHERE active = 1")

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

11844

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

6801

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2195

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

4328

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

5034

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

3951

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5717

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4482

2023.11.13

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

60

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 218人学习

Composer手册
Composer手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn