讲师中心 微信公众号
AI工具推荐 视频效率加速

为什么MySQL在处理大量Distinct操作时非常依赖合适的索引?

轻辰大大_8416

轻辰大大_8416

发布时间:2026-08-04 12:58:07

|

240人浏览过

|

来源于php中文网

原创

DISTINCT多列查询慢的根本原因是MySQL默认需排序和建临时表,而非去重逻辑复杂;必须依赖覆盖索引(列顺序严格匹配)才能跳过filesort和temporary,直接从B+树叶子节点读取唯一值。

为什么mysql在处理大量distinct操作时非常依赖合适的索引?

DISTINCT 多列查询慢,根本原因不是“去重逻辑复杂”,而是 MySQL 默认要排序+建临时表

MySQL 的 DISTINCT 不是靠哈希表一次性扫一遍就完事的。它底层基本等价于 GROUP BY,会触发排序(Using filesort)和/或内存/磁盘临时表(Using temporary)。数据量一大,没索引支撑,这两步立刻变成 I/O 和 CPU 瓶颈。

为什么 DISTINCT 必须走索引才能快?

有合适索引时,MySQL 可以直接从 B+ 树叶子节点顺序读取唯一值,跳过排序和临时表——前提是索引覆盖所有 DISTINCT 列,且顺序匹配。

MySQL8 CRM Schema Design Expert
MySQL8 CRM Schema Design Expert

面向 CRM 系统的 MySQL 8 数据库模式设计。当用户需要为客户关系管理(CRM)系统设计、评审、优化或生成数据库模式时,应使用此项技能。

下载
  • 单列 DISTINCT col1:只要 col1 上有普通索引或主键,EXPLAIN 中通常能看到 type: index + Extra: Using index
  • 多列 DISTINCT col1, col2, col3:必须建复合索引 INDEX(col1, col2, col3),且查询列顺序与索引定义完全一致;否则优化器大概率放弃使用索引
  • 如果只查 DISTINCT col1, col2 却建了 INDEX(col2, col1),MySQL 通常不会用——B+ 树按左前缀有序,col1 不在最左,无法保证顺序遍历去重

DISTINCT 查询不走索引的典型现象

执行 EXPLAIN SELECT DISTINCT col1, col2 FROM t 后,看到这些信号基本可以确认没走索引:

  • type: ALL:全表扫描,毫无悬念
  • Extra: Using temporary; Using filesort:说明正在内存或磁盘建临时表并排序,性能已亮红灯
  • key: NULL:明确告诉你没用任何索引
  • 即使 col1 有索引,但查询是 DISTINCT col1, col2 且 col2 没被包含在索引里,InnoDB 仍可能放弃该索引(尤其当选择性低、重复值多时)

覆盖索引对 DISTINCT 的实际价值

覆盖索引不是“锦上添花”,而是让 DISTINCT 能绕过聚簇索引回表的关键。只要索引里包含了所有 DISTINCT 的列,MySQL 就能纯靠索引树完成去重,不用碰一行真实数据。

  • 建 INDEX idx_dept_salary ON employees(department, salary) 后,SELECT DISTINCT department, salary FROM employees 就能全程走索引
  • 但如果加了 ORDER BY 或 LIMIT,情况会变复杂:比如 SELECT DISTINCT department FROM employees ORDER BY department,有索引可加速;但换成 ORDER BY name,索引就失效了
  • 注意:MEMORY 引擎的 HASH 索引对 DISTINCT 几乎无用,因为它不支持范围扫描和排序——而 DISTINCT 依赖有序遍历

真正容易被忽略的是:索引列顺序必须严格匹配查询字段顺序,且不能有“中间断层”。比如想优化 DISTINCT a, b, c,建 (a, c) 是无效的,哪怕 b 是主键也不行——因为缺失 b,索引无法保证 (a,b,c) 组合的全局唯一顺序。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4803

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

991

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1269

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6821

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3523

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6800

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

9441

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1270

2024.04.29

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

20

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 194人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn