讲师中心 微信公众号
AI工具推荐 视频效率加速

在SQL Server中如何重写低效的COUNT DISTINCT语句?

酷明姑娘_5200

酷明姑娘_5200

发布时间:2026-10-17 08:05:06

|

160人浏览过

|

来源于php中文网

原创

COUNT(DISTINCT)在GROUP BY中慢是因为SQL Server对每个分组单独去重,5万组即执行5万次哈希/排序;内存不足时溢出TempDB导致性能断崖下跌,应改用子查询预聚合并加分区裁剪和覆盖索引优化。

在sql server中如何重写低效的count distinct语句?

为什么COUNT(DISTINCT)在GROUP BY里特别慢

不是数据总量大导致慢,而是SQL Server对每个分组都单独做一次去重——比如按channel_code分组后算COUNT(DISTINCT user_id),若有5万组,就得执行5万次哈希或排序。执行计划中若出现Using temporary; Using filesort(实际在SQL Server里表现为Hash Match (Aggregate) + Spill to TempDB),基本意味着内存撑不住,开始往磁盘写临时数据,性能断崖下跌。

用子查询预聚合替代JOIN后去重

核心思路是把高成本的COUNT(DISTINCT)下沉到子查询中,在更小的结果集上完成去重,外层只做轻量关联。原始低效写法:

SELECT b.name, COUNT(DISTINCT a.user_id)
FROM table_a a
JOIN table_b b ON a.dashboard_id = b.id
GROUP BY b.name

应重写为:

SELECT b.name, new_a.ct
FROM table_b b
JOIN (
  SELECT dashboard_id, COUNT(DISTINCT user_id) AS ct
  FROM table_a
  WHERE dt = '2026-09'  -- 必须加分区裁剪
  GROUP BY dashboard_id
) new_a ON new_a.dashboard_id = b.id
  • 子查询table_a先按dashboard_id聚合,结果行数通常极小(几百到几千),JOIN开销远低于原写法
  • WHERE dt = '2026-09'必须写在子查询内,否则优化器无法下推谓词,仍会扫描全表
  • 若table_a有覆盖索引(如(dashboard_id, user_id, dt)),子查询可完全走索引,避免回表

多个DISTINCT字段必须拆开预聚合

同时写COUNT(DISTINCT col1), COUNT(DISTINCT col2)会让SQL Server生成多个独立的哈希聚合通道,CPU和TempDB压力翻倍。不能靠一个子查询解决,必须分别聚合再JOIN:

SELECT t1.channel, t1.order_cnt, t2.user_cnt
FROM (
  SELECT channel_code AS channel, COUNT(DISTINCT order_no) AS order_cnt
  FROM user_order
  WHERE del_flag = '0' AND create_date >= '2026-01-01'
  GROUP BY channel_code
) t1
JOIN (
  SELECT channel_code AS channel, COUNT(DISTINCT user_id) AS user_cnt
  FROM user_order
  WHERE del_flag = '0' AND create_date >= '2026-01-01'
  GROUP BY channel_code
) t2 ON t1.channel = t2.channel

注意两点:

  • 两个子查询的WHERE条件必须完全一致,否则JOIN结果可能出错
  • 如果user_order表很大,建议给(channel_code, del_flag, create_date)建复合索引,并把order_no和user_id作为包含列(INCLUDE)以支持覆盖扫描

别让DISTINCT掩盖主键或唯一约束

如果去重字段本身就是主键或有唯一约束(比如COUNT(DISTINCT order_id)),SQL Server仍会走完整去重流程,白白浪费资源。此时应直接用COUNT(*)替代:

-- 低效(order_id是主键)
SELECT COUNT(DISTINCT order_id) FROM orders WHERE status = 'shipped'
<p>-- 高效等价写法
SELECT COUNT(*) FROM orders WHERE status = 'shipped'

这类误用在视图或ORM生成SQL中很常见,容易被忽略——它不报错,但执行计划里多出不必要的Hash Aggregate节点,且无法利用统计信息跳过计算。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

相关专题

更多
sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5471

2023.08.11

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2685

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

3901

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

2951

2023.08.31

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

947

2023.09.05

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

2607

2023.10.09

数据库对象名无效怎么解决
数据库对象名无效怎么解决

数据库对象名无效解决办法:1、检查使用的对象名是否正确,确保没有拼写错误;2、检查数据库中是否已存在具有相同名称的对象,如果是,请更改对象名为一个不同的名称,然后重新创建;3、确保在连接数据库时使用了正确的用户名、密码和数据库名称;4、尝试重启数据库服务,然后再次尝试创建或使用对象;5、尝试更新驱动程序,然后再次尝试创建或使用对象。

2607

2023.10.16

vb连接access数据库的方法
vb连接access数据库的方法

vb连接access数据库方法:1、使用ADO连接,首先导入System.Data.OleDb模块,然后定义一个连接字符串,接着创建一个OleDbConnection对象并使用Open() 方法打开连接;2、使用DAO连接,首先导入 Microsoft.Jet.OLEDB模块,然后定义一个连接字符串,接着创建一个JetConnection对象并使用Open()方法打开连接即可。

2873

2023.10.16

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn