讲师中心 微信公众号
AI工具推荐 视频效率加速

如何排查MySQL由于大字段BLOB更新引发的行锁争用_采用垂直拆表策略

陌雪姑娘_5670

陌雪姑娘_5670

发布时间:2026-05-15 06:33:36

|

377人浏览过

|

来源于php中文网

原创

BLOB字段更新放大行锁争用,因InnoDB对含BLOB的行默认加全记录锁,且优化器易弃用二级索引,导致锁范围扩大、扫描行数激增;垂直拆表需解耦读写路径、新建扩展表并补建索引,同时防止单行高频更新与跨表事务。

如何排查mysql由于大字段blob更新引发的行锁争用_采用垂直拆表策略

为什么BLOB字段更新会放大行锁争用

不是BLOB本身“特别重”,而是InnoDB对含BLOB/TEXT列的行在更新时默认走聚簇索引全记录锁(X lock on clustered index record),哪怕只改其他普通字段。只要该行有BLOB,UPDATE语句就会锁住整行物理记录——包括所有变长字段的外部页指针。更关键的是,BLOB列不参与索引排序,导致优化器容易低估扫描成本,进而放弃使用二级索引,间接扩大锁范围。

常见错误现象:SHOW ENGINE INNODB STATUS\G里看到大量lock_mode X locks rec but not gap但trx_rows_locked远高于实际匹配行数;慢查日志中UPDATE语句rows_examined接近表总行数;QPS上不去但Innodb_row_lock_waits持续上涨。

  • 垂直拆表前,SELECT * FROM t WHERE id = 123也会加载BLOB内容,拖慢查询并加剧锁持有时间
  • 应用层ORM若未显式指定SELECT字段,极易触发隐式全字段读取
  • BLOB列即使为NULL,InnoDB仍为其保留20字节指针空间,影响页内行密度和锁竞争粒度

如何用information_schema定位BLOB锁热点行

不能只看INNODB_TRX,得结合INNODB_LOCKS和INNODB_LOCK_WAITS反查被锁的主键值,再关联到具体BLOB所在行。重点不是“谁在等”,而是“等哪一行”以及“那行有没有BLOB”。

实操建议:

  • 先执行SELECT trx_id, trx_mysql_thread_id, trx_query FROM information_schema.INNODB_TRX WHERE trx_state = 'LOCK WAIT'拿到等待事务
  • 用结果中的trx_id去INNODB_LOCK_WAITS查blocking_trx_id,再反查持锁事务的trx_mysql_thread_id
  • 通过performance_schema.threads和performance_schema.events_statements_current定位其原始SQL(需提前开启performance_schema)
  • 最后用该SQL中的WHERE条件(如WHERE order_id = 45678)去查原表,确认该行是否含非空BLOB字段:SELECT order_id, LENGTH(blob_content) > 0 AS has_blob FROM orders WHERE order_id = 45678

垂直拆表时BLOB字段迁移的关键细节

拆不是简单ALTER TABLE切走字段,要确保新旧路径完全解耦:老业务读写仍走原表(兼容过渡),新逻辑必须绕过BLOB列。否则拆了等于没拆,锁还是卡在原表主键上。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

推荐步骤:

  • 新建扩展表:CREATE TABLE orders_blob_ext (order_id BIGINT PRIMARY KEY, blob_content LONGBLOB, updated_at TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP),注意order_id必须与原表一致且加主键,避免JOIN时额外锁
  • 原表删掉BLOB字段:ALTER TABLE orders DROP COLUMN blob_content(线上操作需评估MDL锁影响,建议低峰期+pt-online-schema-change)
  • 应用层改造:所有涉及BLOB的INSERT/UPDATE全部路由到orders_blob_ext;原表SELECT禁止*,明确排除BLOB字段
  • 补数据用INSERT IGNORE INTO orders_blob_ext SELECT order_id, blob_content, NOW() FROM orders_old,避免唯一键冲突

注意:orders_blob_ext表本身也需建INDEX(如按updated_at),否则SELECT ... ORDER BY updated_at LIMIT 10会触发全表扫描+全行锁。

拆完之后还要防哪些隐形坑

垂直拆表解决的是“锁粒度”,但不解决“锁频率”。如果业务仍是高频更新同一order_id的BLOB(比如实时上传图片缩略图),新表照样会因单行争用卡住。

必须同步做的几件事:

  • 检查orders_blob_ext的PRIMARY KEY是否被高频更新语句命中——若存在UPDATE orders_blob_ext SET blob_content = ? WHERE order_id = ?,就仍会锁单行;考虑加冗余字段做分片键,例如shard_id TINYINT,把同一订单的多次BLOB更新分散到不同物理行
  • 禁用AUTOCOMMIT=0下跨表事务:原表orders和扩展表orders_blob_ext更新必须拆成两个独立事务,否则锁范围跨表扩大
  • BLOB读取加缓存层:Nginx或应用层缓存/api/blob/{order_id}响应,降低数据库直接压力
  • 监控项要新增:SELECT COUNT(*) FROM information_schema.INNODB_TRX WHERE trx_query LIKE '%orders_blob_ext%',单独盯这个表的事务堆积

最易被忽略的一点:拆表后EXPLAIN显示type=ALL的查询,往往是因为忘了给orders_blob_ext建索引——它不再继承原表索引,而BLOB表又常被当作“附属表”被忽视。

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

超级麦吉

一款通过数字员工协作完成调研、数据分析与文档制作的AI办公平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4583

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

951

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1209

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6561

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3323

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6520

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

8981

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1210

2024.04.29

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

20

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 192人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn