讲师中心 微信公众号
AI工具推荐 视频效率加速

如何优化大事务处理_mysql并发事务拆分

云丽姑娘_3109

云丽姑娘_3109

发布时间:2026-01-13 08:37:38

|

925人浏览过

|

来源于php中文网

原创

大事务拆分是提升MySQL并发性能与稳定性的关键,需按业务语义分批处理、游标分页、临时表+异步补偿,并注意连接与事务配置。

如何优化大事务处理_mysql并发事务拆分

大事务在 MySQL 中容易引发锁等待、主从延迟、内存占用过高甚至 OOM,拆分事务是提升并发性能和稳定性的关键手段。核心思路是:把一个长时间持有锁、扫描大量数据、写入多行的“巨无霸事务”,拆成多个小而快的事务,中间通过业务逻辑或状态控制保证一致性。

识别并定位大事务

先确认哪些事务真正属于“大事务”。不只是执行时间长,关键是:锁住的行数多、扫描的行数多、生成的 binlog 大、事务内包含大量 INSERT/UPDATE/DELETE

  • 查活跃长事务:SELECT * FROM information_schema.INNODB_TRX WHERE TIME_TO_SEC(TIMEDIFF(NOW(), TRX_STARTED)) > 60;
  • 看事务扫描量:SHOW ENGINE INNODB STATUS\G 中关注 mysql tables in userows examined
  • 结合慢日志(log_slow_admin_statements=ON)过滤带有 COMMIT 的慢查询,常暴露提交阶段卡顿的大事务

按业务语义合理拆分

不能为拆而拆,必须保障业务正确性。常见可拆分场景:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 批量导入/同步:10 万行数据插入,不要单个事务全包。按 500~5000 行分批,每批独立事务,失败只重试当前批次
  • 状态批量更新:如“将所有待处理订单更新为已发货”,可按 order_id 范围或时间分片(WHERE create_time BETWEEN ? AND ?),避免全表扫描+全表加锁
  • 复杂计算+落库:先在应用层完成聚合/校验,再用小事务写结果;避免在事务内做 RPC、文件读写、循环调用等耗时操作

用游标或分页替代全量加载

避免在事务中 SELECT ... FOR UPDATE 扫描几十万行。改用基于主键/自增 ID 的游标分页:

  • 第一次:SELECT * FROM t WHERE id > 0 ORDER BY id LIMIT 1000 FOR UPDATE
  • 记下本次最大 id(比如 12345),下次查询 WHERE id > 12345,继续取下一批
  • 配合应用层循环处理,每次事务只锁 1000 行,释放快、冲突少、主从复制压力小

善用临时表与最终一致性补偿

对无法强一致拆分的场景(如跨库/跨服务更新),可用“两阶段”思路:

  • 第一阶段:小事务写入本地 task_log 表(记录要做的动作 + 状态=‘pending’)
  • 第二阶段:异步任务(如定时 Job 或消息队列消费者)拉取 pending 任务,逐条执行并更新状态为 ‘done’ 或 ‘failed’
  • 关键点:task_log 表主键/唯一键防重,执行前先 SELECT ... FOR UPDATE + 状态校验,避免重复执行

不复杂但容易忽略:拆分后记得检查 autocommit 是否关闭、连接是否复用、是否有隐式事务(如 DDL 后自动 commit)。小事务不是银弹,需配合索引优化、读写分离和监控告警一起落地。

热门AI工具

更多
Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

LibLibAI
LibLibAI Hot

一款AI视频创作工具,主要用于国内领先的AI创意平台,以海量模型、低门槛操作与“创作-分享-商业化”生态,让小白与专业创作者都能高效实现图文乃至视频创意表达,适合需要提升相关任务效率的用户。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

1933

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1179

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

695

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2492

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

4088

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

979

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

4371

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

3942

2023.08.14

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

0

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 169人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 274人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn