讲师中心 微信公众号
AI工具推荐 视频效率加速

如何防止MySQL中的大事务导致Binlog文件暴涨?

胖墨同学_1770

胖墨同学_1770

发布时间:2026-06-17 06:31:01

|

451人浏览过

|

来源于php中文网

原创

大事务导致binlog_cache_size频繁刷盘并阻塞COMMIT:默认值过小(5.7为32KB、8.0为128KB),超限后触发串行磁盘写入,使后续COMMIT排队;可通过SHOW STATUS监控binlog_cache_disk_use是否接近binlog_cache_use来判断,并谨慎调大binlog_cache_size(如设为4MB),但根本解法是识别高binlog产出SQL、优化binlog_format(如切至MIXED)或拆分事务。

如何防止mysql中的大事务导致binlog文件暴涨?

大事务让 binlog_cache_size 频繁刷盘,COMMIT 开始排队

不是所有大事务都会立刻写磁盘,很多卡在 binlog_cache_size 内存里就堵死了。MySQL 每个连接独享一份缓存,默认仅 32KB(5.7)或 128KB(8.0)。一旦事务产生的 binlog event 超过该值,就会触发串行磁盘临时文件写入——后续所有 COMMIT 都得等它完成。

查是否已频繁落盘:SHOW STATUS LIKE 'binlog_cache%';若 binlog_cache_disk_use 接近或等于 binlog_cache_use,说明几乎每个事务都在刷盘。

  • 临时调参可缓解:比如 SET GLOBAL binlog_cache_size = 4194304(4MB),但别设太高(>512MB)——连接数多时易引发单机内存暴涨
  • max_binlog_cache_size 不是性能参数,而是熔断开关:超限直接报错 ERROR 1197 (HY000),默认值常为 4GB 或 16MB,云厂商可能锁死无法修改
  • 该参数只对当前会话生效的事务起作用,且必须小于 max_allowed_packet,否则仍失败

ROW 格式下一条 UPDATE 可能生成百万级 binlog event

盲目调大 binlog_cache_size 只是掩盖问题。真正该先做的,是识别谁在疯狂产 binlog。例如:UPDATE t SET c=1 WHERE id BETWEEN 1 AND 1000000 在 ROW 模式下会生成百万级 event;STATEMENT 模式下就只有 1 条。

查当前格式:SHOW VARIABLES LIKE 'binlog_format';确认业务是否真需要 ROW 级精度(如涉及函数、触发器、不安全 SQL 的复制场景)。

  • 非必要场景建议切到 MIXED:自动降级为 STATEMENT,仅在必要时用 ROW
  • 切之前务必验证从库兼容性,尤其注意 last_insert_id()、SLEEP()、UDF 等函数行为差异
  • 切完观察 SHOW BINARY LOGS 文件增长速率,对比调整前后单事务日志体积

PURGE 前不核对主从位置,删掉的 binlog 从库还没读完

大事务不仅让单个 binlog 文件远超 max_binlog_size(比如一个 5GB UPDATE 写出 5.2G 的 mysql-bin.000123),更关键的是它拉长了主从延迟窗口——你不敢删的 binlog,很可能正卡在从库 relay log 里没执行完。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

安全清理三步缺一不可:

  • 查主库当前日志:SHOW MASTER STATUS → 记下 File 字段(如 mysql-bin.000123)
  • 查从库同步状态:SHOW SLAVE STATUS\G → 看 Relay_Master_Log_File 和 Exec_Master_Log_Pos
  • 只允许删 mysql-bin.000122 及更早的;命令示例:PURGE BINARY LOGS TO 'mysql-bin.000123'

expire_logs_days=0 是默认陷阱,云上实例常被锁死

MySQL 默认 expire_logs_days = 0,官方明确表示“不启用自动清理”。哪怕每天只跑几百条 INSERT,只要 log-bin 开启,日志就持续累积——RDS 实例可能因此触发“锁定中”状态。

注意版本差异:

  • MySQL 5.7:配 expire_logs_days = 7(单位天),写进 my.cnf 的 [mysqld] 段并重启最稳妥
  • MySQL 8.0+:必须用 binlog_expire_logs_seconds = 604800(7 天),二者共存会导致启动报错 3683
  • 云厂商(如阿里云 RDS)可能禁用该参数,此时只能靠定时 PURGE + 外部监控告警兜底

真正难处理的,是那些既不能改格式、又不能拆事务、还跑在云托管环境里的存量业务——这时候盯紧 binlog_cache_disk_use 和 SHOW PROCESSLIST 里长时间 Committing 的线程,比调参更管用。

热门AI工具

更多
墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2233

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1379

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

795

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

3092

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

5228

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

1159

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5491

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

4822

2023.08.14

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 187人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn