讲师中心 微信公众号
AI工具推荐 视频效率加速

Laravel如何批量插入数据 Laravel大批量数据入库优化 【处理】

老强小哥_1146

老强小哥_1146

发布时间:2026-03-10 03:59:11

|

605人浏览过

|

来源于php中文网

原创

应根据是否有唯一约束选择 insert() 或 upsert():无唯一键用 insert() 分块插入;有业务主键且需幂等则加唯一索引后用 upsert();分块大小依字段复杂度和硬件设为 200–3000,避免事务过长引发锁争用与内存问题。

laravel如何批量插入数据 laravel大批量数据入库优化 【处理】

用 insert() 还是 upsert()?看有没有唯一约束

批量插入的核心分歧不在“快不快”,而在“要不要去重/更新”。insert() 纯追加,简单粗暴;upsert() 能按指定字段(如 email 或 sku)判断是否存在,存在就更新,不存在才插入——但要求数据库表有唯一索引(否则报错或行为异常)。

  • 没唯一键、纯日志类数据 → 用 insert(),配合分块(chunk)避免内存爆掉
  • 有业务主键(比如商品编码、用户手机号)且需幂等 → 必须加唯一索引,再用 upsert(),否则并发写入会脏数据
  • MySQL 8.0.19+ / PostgreSQL 支持 upsert(),SQLite 不支持,Laravel 9+ 才内置该方法

分块大小设多少?别迷信 1000

所谓“分块插入”,本质是把大数组切成小批次交给数据库。设太大(如 5000 行),PHP 内存可能撑不住,MySQL 的 max_allowed_packet 也可能截断;设太小(如 100),IO 次数太多,反而更慢。

  • 默认从 1000 开始试,观察 memory_get_peak_usage() 和执行时间
  • 字段多、含长文本(如 JSON 字段)→ 降到 200~500
  • 纯整数/短字符串 + SSD 数据库服务器 → 可试 2000~3000
  • 别在事务里塞超过 1 万行:InnoDB 日志(redo log)可能写满,触发强制刷盘卡顿

DB::transaction() 包裹批量操作的陷阱

很多人以为“包个事务就能提速”,其实恰恰相反:事务越长,锁持有时间越久,尤其在 upsert() 场景下,InnoDB 会对匹配的唯一索引范围加间隙锁(gap lock),容易导致其他写请求阻塞。

Laravel Cloud
Laravel Cloud

Laravel Cloud(cloud.laravel.com)。此技能用于处理所有 Laravel Cloud 请求,包括搜索和读取数据。只要任务涉及 Laravel Cloud,即使用此技能。

下载
  • 仅当需要原子性(比如插入 A 表同时必须插入 B 表)才用事务包裹整个批次
  • 单表批量插入,建议去掉外层事务,让每批独立提交(Laravel 默认就是 auto-commit)
  • 真要用事务,务必控制每批 ≤ 500 行,并在 try/catch 后显式 DB::rollBack(),否则连接可能被占住
  • 别在事务里混用 insert() 和 update() —— 锁类型不同,死锁风险陡增

模型 createMany() 看似方便,实际最慢

createMany() 是 Eloquent 层封装,它会为每一行数据实例化一个 Model 对象,触发全部 boot、booting、creating 回调,还做属性转换和验证(哪怕你关了 $guarded)。对 1 万条数据,光对象创建开销就比原生 insert() 多 3~5 倍。

  • 只要不依赖模型事件或自动转换(比如 $casts 中的 json),一律跳过模型,直连 DB::table('xxx')->insert(...)
  • 需要时间戳?手动加 'created_at' => now(), 'updated_at' => now(),别指望 createMany() 自动填
  • 真要走模型逻辑(比如加密字段),先用 collect($data)->map(...) 预处理好数组,再传给 insert()

批量入库不是拼函数名有多高级,而是看清数据有没有冲突、数据库能不能扛住、PHP 内存会不会崩——这三个点没理清,换什么方法都白搭。

作者最新文章

yandex入口

2026-11-05 16:11

yandex首页

2026-11-05 16:13

Yandex.tm引擎首页

2026-11-05 16:15

Yandex.tm搜索引擎

2026-11-05 16:17

Yandex引擎首页

2026-11-05 16:19

Yandex官网网页版

2026-11-05 16:21

Yandex.tm引擎入口

2026-11-05 16:22

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

877

2024.04.09

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

855

2024.04.09

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2508

2024.04.09

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

4741

2024.04.10

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

6950

2025.08.05

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

4556

2025.08.05

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

8569

2025.08.05

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

1516

2026.03.04

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

0

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 221人学习

Composer手册
Composer手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn