讲师中心 微信公众号
AI工具推荐 视频效率加速

为什么MySQL批量删除历史数据需要分批事务处理

风瑶大大_2379

风瑶大大_2379

发布时间:2026-10-13 10:48:27

|

238人浏览过

|

来源于php中文网

原创

不分批的批量删除必然导致数据库卡死或服务中断,因其引发锁持有时间延长、binlog/redo日志暴涨、缓冲池脏页积压及事务ID或undo段快速耗尽等三重压力叠加。

为什么mysql批量删除历史数据需要分批事务处理

不分批的批量删除极大概率导致数据库卡死或服务中断——这不是性能问题,是锁、日志、内存三重压力叠加的必然结果。

MySQL单次DELETE为什么容易锁表和拖垮主从

InnoDB 对每行匹配记录加行锁,并同步写入 undo log 和 redo log。删几十万行时:

  • 锁持有时间从毫秒级拉长到数秒甚至分钟,其他事务触发 Lock wait timeout exceeded
  • binlog 或 redo 日志暴涨,主库磁盘 IO 拉满,从库追不上,Seconds_Behind_Master 飙升
  • InnoDB 缓冲池被大量脏页占满,频繁刷盘,进一步加剧 IO 压力
  • 事务 ID(或回滚段)快速消耗,增加 undo log full 或 transaction_id wraparound 风险

DELETE + LIMIT 不加 ORDER BY 就等于没分批

MySQL 的 DELETE ... LIMIT N 行为高度依赖执行计划。没 ORDER BY 时:

  • 优化器可能放弃使用 LIMIT,转而全表扫描 + 逐行判断,LIMIT 变成“最后才截断”,锁和日志压力照旧
  • 高并发下两次 DELETE ... LIMIT 1000 可能删到同一行(中间有新插入/更新),导致漏删或重复删
  • DELETE LOW_PRIORITY 只是排队写请求,反而延长整体耗时,不解决锁和日志本质问题

正确写法必须带索引字段排序:DELETE FROM logs WHERE create_time ;<code>id 必须有索引(通常是主键),否则 ORDER BY 会触发 filesort,性能反降。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

批次大小和节奏怎么控制才不翻车

批次不是越小越安全,也不是越大越快,关键在平衡事务开销与系统负载:

  • 建议每批 LIMIT 1000–5000:小于 1000 增加解析/网络/事务提交开销;大于 5000 容易触发 DBA 长事务告警
  • 每批后加 SLEEP(0.1)(应用层控制),避免 CPU 和 I/O 突增;高负载时可调至 0.5
  • 别用 OFFSET(如 LIMIT 10000,1000),越往后偏移越慢,还可能跳过数据
  • 监控 innodb_row_lock_time_avg(MySQL)或 pg_locks 行数(PG),若持续升高,说明批次仍太大

分批后磁盘空间没释放?这很正常

InnoDB 删除只是标记行“可复用”,不会立刻归还给操作系统。你看到 data_length 不变、df -h 占用照旧,不代表删失败了:

  • 确认是否真在删:查 ROW_COUNT() 或 SELECT TABLE_ROWS FROM information_schema.TABLES 观察趋势
  • 真正回收空间需 OPTIMIZE TABLE 或 ALTER TABLE ENGINE=InnoDB,但这两者本身代价高,一般不在线执行
  • 分区表可考虑 ALTER TABLE DROP PARTITION,前提是数据已按时间等维度做了分区

最容易被忽略的一点:分批策略是否有效,不能只看“删完了”,要看数据库有没有喘气的机会——每次删完立刻查 SHOW PROCESSLIST,确认没有 idle in transaction 或长时间 updating 状态。

热门AI工具

更多
讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2193

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1339

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

775

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2992

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

5028

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

1139

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5291

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

4662

2023.08.14

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

80

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 183人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn