讲师中心 微信公众号
AI工具推荐 视频效率加速

mysql如何优化TEXT/BLOB字段的辅助查询_mysql外部哈希索引

雨杰吖_5568

雨杰吖_5568

发布时间:2026-03-04 11:29:02

|

976人浏览过

|

来源于php中文网

原创

TEXT/BLOB字段不能直接建普通索引,因可能极大导致性能问题;必须指定前缀长度(如content(255)),但前缀索引不支持LIKE '%xxx'、ORDER BY等;可用生成列+哈希(如SHA2)建高效等值索引,或改用FULLTEXT处理关键词搜索。

mysql如何优化text/blob字段的辅助查询_mysql外部哈希索引

TEXT/BLOB 字段为什么不能直接建普通索引

MySQL 对 TEXT 和 BLOB 类型字段限制很死:除非指定前缀长度,否则不允许在它们身上建 INDEX 或 UNIQUE 索引。这是因为这类字段可能极大,全量索引会严重拖慢写入、膨胀索引文件,甚至让 B+ 树结构失效。

你试过 ALTER TABLE t ADD INDEX idx_content(content)?大概率报错 ERROR 1170 (42000): BLOB/TEXT column 'content' used in key specification without a key length —— 这就是 MySQL 在拦你。

  • 只能加前缀索引,比如 ADD INDEX idx_content(content(255)),但 255 是字节数(非字符数),对 utf8mb4 实际最多覆盖 63 个汉字
  • 前缀索引无法支持 ORDER BY、GROUP BY 或 LIKE '%xxx' 这类无左前缀的查询
  • 如果业务常查内容中间或结尾的子串(比如日志里匹配 "error code: 500"),前缀索引完全无效

用生成列 + 普通索引模拟“外部哈希索引”

所谓“外部哈希索引”,不是真的在 MySQL 外面搭 Redis,而是用 MySQL 5.7+ 的 GENERATED COLUMN 把大字段哈希后存成整数或短字符串,再对这个生成列建高效索引。

核心思路:把模糊/全文匹配需求,降维成等值查询。例如查某段文本是否出现过,不扫 content 全文,而是查它的 SHA256 前 16 字节 —— 这个值可建 INDEX,查询飞快。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 添加生成列:ALTER TABLE t ADD COLUMN content_hash CHAR(32) AS (SHA2(content, 256)) STORED
  • 立刻建索引:CREATE INDEX idx_content_hash ON t(content_hash)
  • 查询时改写为:SELECT * FROM t WHERE content_hash = SHA2('目标文本', 256)
  • 注意 STORED 是必须的(不能用 VIRTUAL),否则无法索引
  • 哈希碰撞概率极低,但业务上仍建议加一层 AND content = '目标文本' 做最终校验

什么时候该用全文索引而不是哈希

哈希适合「是否存在」的精确匹配,但如果你要搜关键词、支持分词、需要相关性排序(比如“mysql 优化 slow query”),FULLTEXT 是更正统的选择 —— 尤其在 InnoDB 表中已原生支持。

  • 建全文索引:ALTER TABLE t ADD FULLTEXT(content)(仅限 CHAR/VARCHAR/TEXT)
  • 查询用:SELECT * FROM t WHERE MATCH(content) AGAINST('优化' IN NATURAL LANGUAGE MODE)
  • 注意:全文索引默认忽略少于 4 字符的词(ft_min_word_len=4),且停用词表会影响结果
  • 性能上,全文索引比 LIKE '%xxx%' 快得多,但比哈希索引慢一个数量级;写入开销也明显更高
  • 不支持中文分词(除非配 ngram 或使用第三方插件),纯靠空格/标点切分 —— 这是大多数踩坑的源头

别碰 LIKE '%xxx%',除非你确认数据量永远小于一万行

这是最常被当“捷径”用、实则最伤性能的操作。只要 LIKE 左边带通配符(%xxx),哪怕右边有索引,MySQL 也基本放弃走索引,退化为全表扫描。

  • 哪怕你给 content(500) 加了前缀索引,WHERE content LIKE '%error%' 依然不会用它
  • EXPLAIN 出来 type: ALL、rows 接近表总行数?基本可以判定是这个原因
  • 替代方案只有三个:哈希列(等值)、全文索引(关键词)、或者把检索逻辑移到应用层(如用 Elasticsearch 同步内容)
  • 如果真要保留 LIKE,至少确保是左前缀形式:content LIKE 'ERROR:%',这样能用上前缀索引

哈希列方案看着绕,但上线后查一条从 2s 变成 20ms,这种收益是实打实的。真正容易被忽略的是哈希值存储长度和字符集 —— CHAR(32) 在 utf8mb4 下占 128 字节,而 BINARY(16) 存 MD5 更省空间,只是得用 HEX(MD5(content)) 配合,别搞混编码方式。

热门AI工具

更多
Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4523

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

951

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1189

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6501

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3263

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6460

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

8841

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1210

2024.04.29

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

60

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 191人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn