讲师中心 微信公众号
AI工具推荐 视频效率加速

mysql如何优化大事务的Binlog写入_mysql事务缓存大小配置

陌瑶君_1044

陌瑶君_1044

发布时间:2026-04-23 12:57:22

|

945人浏览过

|

来源于php中文网

原创

binlog_cache_size过小会导致大事务频繁刷盘;应按事务平均binlog体积预估并调大,如20MB;需协同设置innodb_support_xa、sync_binlog和innodb_flush_log_at_trx_commit以保障一致性;ROW格式下推荐binlog_row_image=MINIMAL并确保主键或唯一非空索引存在。

mysql如何优化大事务的binlog写入_mysql事务缓存大小配置

binlog_cache_size 设置太小导致频繁刷盘

大事务写入 Binlog 时,MySQL 先把日志暂存在会话级的 binlog_cache_size 缓冲区里,等事务提交才一次性写入磁盘。如果缓存不够用,MySQL 会退到临时文件(binlog_cache_disk_use 计数器会上升),而磁盘 I/O 比内存慢得多,直接拖慢整个事务提交速度。

实操建议:

  • 查当前值:SHOW VARIABLES LIKE 'binlog_cache_size'; —— 默认 32KB,对大事务完全不够
  • 观察指标:SHOW STATUS LIKE 'binlog_cache%';,重点关注 binlog_cache_disk_use 是否非零
  • 调大原则:按单个事务平均 Binlog 体积预估,比如批量插入 10 万行、每行生成约 200 字节 Binlog,则需至少 20MB;设为 20971520(即 20MB)比盲目设成 1GB 更稳妥
  • 注意:该变量是会话级,SET SESSION binlog_cache_size = 20971520; 只影响当前连接;全局生效要改配置文件并重启或用 SET PERSIST(MySQL 8.0+)

innodb_support_xa 关闭后 Binlog 与 InnoDB 不一致风险

MySQL 5.7.7+ 默认开启 innodb_support_xa(实际由 xa_supports_savepoints 控制),保证两阶段提交(2PC)正确性。关掉它看似能省点开销,但大事务下一旦崩溃,可能出现 Binlog 有记录而 InnoDB 数据没落盘,或者反过来——主从同步直接中断,mysqlbinlog 解析也会报错。

实操建议:

  • 绝对不要在生产环境关闭 innodb_support_xa,尤其开了 GTID 或用了 MHA/MGR
  • 确认状态:SELECT @@innodb_support_xa; 必须返回 ON
  • 相关联的 sync_binlog 和 innodb_flush_log_at_trx_commit 要协同设置:比如都设为 1 保一致性,或都设为 0(仅测试环境)换性能

大事务拆分后 Binlog event 大小超 max_allowed_packet

即使把一个大事务拆成多个小事务执行,单条 INSERT/UPDATE 语句本身如果涉及大量数据(如 INSERT INTO t SELECT ... FROM huge_table),生成的 Binlog event 仍可能超过 max_allowed_packet 限制,导致写入失败,错误信息类似:Got a packet bigger than 'max_allowed_packet' bytes。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

实操建议:

  • 检查当前值:SHOW VARIABLES LIKE 'max_allowed_packet'; —— 默认 4MB,不够处理宽表批量操作
  • 调大必须同步改客户端和服务器端:不仅 mysqld 配置里设,连接该库的 mysql 客户端、应用 JDBC URL 里的 maxAllowedPacket 也要匹配
  • 更安全的做法是控制单次 DML 数据量,例如用 LIMIT 分批:INSERT INTO t SELECT * FROM s WHERE id BETWEEN ? AND ?;,避免依赖调大 packet

row格式下大事务 Binlog 体积爆炸的真实原因

用 binlog_format = ROW 是推荐做法,但它会让每个变更行都记完整镜像(尤其是 UPDATE 记旧值+新值)。一个更新百万行的事务,Binlog 文件可能比原表还大,写入卡顿、网络传输慢、从库重放延迟全跟着来。

实操建议:

  • 不是所有场景都适合 ROW:纯主键更新且无触发器/外键时,STATEMENT 格式 Binlog 小得多,但得确保语句确定性(比如不能含 NOW()、UUID())
  • 若坚持用 ROW,可配合 binlog_row_image = MINIMAL(MySQL 5.6.2+),只记录被修改列的前后值,跳过未变字段
  • 注意:MINIMAL 要求主键或唯一非空索引存在,否则降级为 FULL;可通过 SHOW BINLOG EVENTS 查看实际写入的 event 内容验证

大事务的 Binlog 优化本质是平衡「一致性」和「吞吐」,但很多坑不在参数本身,而在参数之间的隐式耦合——比如调大 binlog_cache_size 却忘了 max_allowed_packet,或者切了 MINIMAL 却没确认表有合适索引。这些地方一漏,前面所有调整都白搭。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2293

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1399

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

835

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

3212

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

5448

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

1199

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5711

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

4982

2023.08.14

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 189人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn