讲师中心 微信公众号

工具推荐

视频效率加速
Laper
Laper

剧本策划到成片协作

立刻MV
立刻MV

低成本歌曲 MV、视频生成

剧云
剧云

中文短剧剧本制作平台

Seko
Seko

AI短剧一键生成成片

怎样在SQL Server 2022中使用聚合函数避免内存溢出?

冬磊大大_6208

冬磊大大_6208

发布时间:2026-11-16 11:36:31

|

768人浏览过

|

来源于php中文网

原创

必须加WHERE时间范围过滤,否则即使建索引也会全表扫描;正确写法为WHERE ts >= '2026-10-25',禁用函数包裹列(如DATEPART)以免索引失效。

怎样在sql server 2022中使用聚合函数避免内存溢出?

聚合前必须加 WHERE 时间范围过滤

SQL Server 2022 的 time_bucket 和 GROUP BY 聚合本身不控制扫描行数,哪怕建了索引,没写 WHERE 就等于让优化器自由决定——它大概率全表扫描。百万级传感器表上直接 SELECT time_bucket('1 hour', ts), AVG(value) FROM sensor_data GROUP BY time_bucket('1 hour', ts),极易触发内存授予不足(RESOURCE_SEMAPHORE)或 OutOfMemoryException。

正确做法是强制限定时间窗口:

  • WHERE ts >= '2026-10-25' AND ts —— 静态范围最安全
  • WHERE ts >= DATEADD(day, -7, GETUTCDATE()) —— 动态范围需注意统计信息是否最新
  • 避免 WHERE DATEPART(hour, ts) = 14 这类函数包裹列,会禁用索引,导致扫描放大

慎用 COUNT(DISTINCT) 和大字段聚合

COUNT(DISTINCT) 在 SQL Server 中底层依赖排序 + 哈希构建去重集,数据量稍大(比如单 bucket 超 10 万行)就容易耗尽 granted memory。同理,对 NVARCHAR(MAX) 或 XML 列做 STRING_AGG、MAX 等聚合,也会因中间结果膨胀引发内存压力。

可操作的缓解方式:

  • 用计算列替代:如常按设备分组统计唯一事件类型,先建 ALTER TABLE sensor_data ADD event_type_hash AS HASHBYTES('SHA2_256', ISNULL(event_type, '')) PERSISTED,再对哈希列 COUNT(DISTINCT event_type_hash)
  • 改用近似计数:APPROX_COUNT_DISTINCT(event_type)(SQL Server 2019+),误差率约 2%,但内存开销极低
  • 聚合前裁剪字段长度:STRING_AGG(LEFT(message, 100), ';') 防止长文本撑爆内存

避免 NULL 值参与高开销转换

显式处理 NULL 很常见,但像 AVG(ISNULL(value, 0)) 或 SUM(CASE WHEN value IS NULL THEN 0 ELSE value END) 会阻止优化器下推聚合,尤其在并行计划中,每个线程都要单独做判断和替换,显著增加 CPU 和内存负载。

更轻量的做法:

  • 确认业务语义允许时,直接用原生聚合:AVG(value)(自动跳过 NULL)、COUNT(value)(只计非空)
  • 若必须补零且字段有索引,考虑提前物化:ALTER TABLE sensor_data ADD value_nonnull AS ISNULL(value, 0) PERSISTED,再对新列建索引
  • 警惕 CONVERT/CAST 套在聚合列上,例如 AVG(CONVERT(DECIMAL(18,2), value)),类型转换发生在每行,不是聚合后——这比单纯 AVG(value) 多出数倍内存申请

聚合结果过大时优先走流式分页,而非一次性拉取

当 GROUP BY time_bucket 产出几千个时间桶,又带多列 STRING_AGG 或 JSON_OBJECT,客户端一次性接收可能超限。SQL Server 不支持流式游标返回聚合结果,但可通过 OFFSET / FETCH 分批查,或用临时表缓存中间聚合结果再分页读。

关键点:

  • 不要在最终 SELECT 里嵌套多层聚合(如 SELECT ... FROM (SELECT ..., STRING_AGG(...) FROM ...) t),这会让优化器无法复用中间结果
  • 用 SELECT ... INTO #agg_temp 先落地聚合,再从临时表分页查,能明确控制内存峰值
  • 若用 OFFSET 10000 ROWS FETCH NEXT 100 ROWS ONLY,确保 ORDER BY 列有索引,否则每次分页都重算全部聚合

真正卡住的往往不是聚合逻辑本身,而是时间范围失控、DISTINCT 无节制、以及把 NULL 处理写成“每行必判”的暴力模式。SQL Server 2022 的内存管理很严格,给多少就用多少,多一KB都可能拒绝执行。

热门AI工具

更多
音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

Flowith
Flowith Hot

Flowith是一款基于画布和智能体工作流的 AI 协作工作空间。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

6871

2023.08.11

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

3225

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

4241

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

3651

2023.08.31

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

1127

2023.09.05

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

3147

2023.10.09

数据库对象名无效怎么解决
数据库对象名无效怎么解决

数据库对象名无效解决办法:1、检查使用的对象名是否正确,确保没有拼写错误;2、检查数据库中是否已存在具有相同名称的对象,如果是,请更改对象名为一个不同的名称,然后重新创建;3、确保在连接数据库时使用了正确的用户名、密码和数据库名称;4、尝试重启数据库服务,然后再次尝试创建或使用对象;5、尝试更新驱动程序,然后再次尝试创建或使用对象。

3147

2023.10.16

vb连接access数据库的方法
vb连接access数据库的方法

vb连接access数据库方法:1、使用ADO连接,首先导入System.Data.OleDb模块,然后定义一个连接字符串,接着创建一个OleDbConnection对象并使用Open() 方法打开连接;2、使用DAO连接,首先导入 Microsoft.Jet.OLEDB模块,然后定义一个连接字符串,接着创建一个JetConnection对象并使用Open()方法打开连接即可。

3013

2023.10.16

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

120

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn