讲师中心 微信公众号

工具推荐

视频效率加速
Laper
Laper

剧本策划到成片协作

Seko
Seko

AI短剧一键生成成片

剧云
剧云

中文短剧剧本制作平台

AniShort
AniShort

AI短剧协同制作平台

如何在PostgreSQL 14中解决GROUP BY并行度过低问题?

风杰酱_6122

风杰酱_6122

发布时间:2026-11-19 10:24:14

|

175人浏览过

|

来源于php中文网

原创

GROUP BY未走并行需先检查执行计划是否有Gather节点;常见原因包括表太小、统计信息陈旧、max_parallel_workers_per_gather为0、含不支持并行的构造,或work_mem不足导致磁盘聚合。

如何在postgresql 14中解决group by并行度过低问题?

GROUP BY为什么没走并行?先看执行计划里有没有Gather节点

PostgreSQL 14 的 GROUP BY 要触发并行,必须满足两个硬性条件:优化器生成的计划中出现 Gather 节点,且该节点下有 Parallel Seq Scan 或 Parallel Index Scan 子节点。如果 EXPLAIN (ANALYZE, VERBOSE) 输出里只有普通 Seq Scan 或 HashAggregate,说明并行根本没被考虑。

常见原因包括:

  • 表太小,低于 min_parallel_table_scan_size(默认 8MB),系统直接跳过并行路径
  • 统计信息陈旧,pg_class.reltuples 显示行数远少于实际,导致代价估算偏低
  • max_parallel_workers_per_gather 设为 0,或 max_worker_processes 不足,Worker 进程无法启动
  • 查询里含不支持并行的构造,比如某些窗口函数、不可并行的自定义聚合、或子查询中用了 FOR UPDATE

work_mem不够会直接废掉并行聚合能力

很多人以为只要开了并行,GROUP BY 就能自动分摊压力——其实不然。并行 Worker 只负责扫描和初步过滤,真正的分组聚合(Partial Aggregate → Finalize Aggregate)仍依赖内存。如果 work_mem 太小,每个 Worker 都可能因哈希表溢出而退化成磁盘聚合,反而拖慢整体速度。

验证方式很直接:

  • 运行 EXPLAIN (ANALYZE, BUFFERS),检查 Partial HashAggregate 和 Finalize HashAggregate 节点的 Disk Usage 是否 > 0
  • 若看到 writing to disk due to insufficient memory 日志,说明 work_mem 已成瓶颈
  • 注意:work_mem 是「每个 Worker 独占」的,不是总和。设成 '64MB' 且启了 4 个 Worker,单查询就可能吃掉 256MB 内存

关键参数要协同调,不能只改 max_parallel_workers_per_gather

单独把 max_parallel_workers_per_gather 从 2 改成 8,往往没用,甚至更慢。并行效率取决于三者配合:

  • max_worker_processes 必须 ≥ 所有并发查询的 Worker 总需求,建议设为 CPU 核心数 × 2(如 16 核机器设 32)
  • max_parallel_workers_per_gather 推荐 ≤ CPU 核心数 ÷ 2,避免 Worker 争抢 CPU;高吞吐 OLAP 场景可设 4~6
  • min_parallel_table_scan_size 可降至 '4MB',让中等大小分区表也能进并行路径;但别设成 '1MB',否则小表频繁启 Worker 反而增加调度开销

所有这些参数都得写进 postgresql.conf 并执行 SELECT pg_reload_conf() 生效,临时 SET 不起作用。

分区表上 GROUP BY 并行效果差?检查分区剪枝是否生效

在按时间分区的大表上做 GROUP BY,如果 WHERE 条件没精准命中具体分区(比如用 date_trunc('month', ts) 而非直接比较 ts >= '2026-01-01' AND ts ),优化器可能无法剪枝,被迫扫描全部子表——这时即使并行开启,也是在无效数据上白忙。

确认方法:

  • 看 EXPLAIN 输出里 Append 节点下是否只列出几个子分区,还是列出了全部几十个
  • 确保分区键类型与查询条件完全匹配,避免隐式转换(如 text 列 vs varchar 参数)
  • 对高频分组字段建本地索引(CREATE INDEX ON part_202601 (user_id)),否则每个分区都得全扫

并行 + 分区剪枝 + 合理的 work_mem,三者缺一不可。最容易被忽略的是:哪怕所有配置都对,只要某次查询因参数绑定导致剪枝失败,性能就会断崖下跌。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

相关专题

更多
postgresql常用命令
postgresql常用命令

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。本专题为大家提供postgresql相关的文章、下载、课程内容,供大家免费下载体验。

233

2023.10.10

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5049

2023.11.02

postgresql常用命令有哪些
postgresql常用命令有哪些

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、l、c、dt、d table_name、du、i file_name、e和q等。更详细的postgresql常用命令,大家可以访问下面的文章。

647

2023.11.16

postgresql常用命令介绍
postgresql常用命令介绍

postgresql常用命令有l、d、d5、di、ds、dv、df、dn、db、dg、dp、c、pset、show search_path、ALTER TABLE、INSERT INTO、UPDATE、DELETE FROM、SELECT等。想了解更多postgresql的相关内容,可以阅读本专题下面的文章。

1396

2023.11.20

PostgreSQL性能优化与索引调优实战
PostgreSQL性能优化与索引调优实战

本专题面向后端开发与数据库工程师,深入讲解 PostgreSQL 查询优化原理与索引机制。内容包括执行计划分析、常见索引类型对比、慢查询优化策略、事务隔离级别以及高并发场景下的性能调优技巧。通过实战案例解析,帮助开发者提升数据库响应速度与系统稳定性。

500

2026.02.12

PostgreSQL 性能优化与查询执行计划实战
PostgreSQL 性能优化与查询执行计划实战

本专题深入解析PostgreSQL性能优化核心,聚焦查询执行计划的实战应用。通过EXPLAIN命令精准定位瓶颈,结合索引策略、SQL改写与参数调优,系统提升查询效率。从执行计划解读到性能调优全流程,助你掌握数据库性能诊断与优化实战能力。

170

2026.05.08

PostgreSQL 在 Next.js / Go 全栈架构中的工程化实践
PostgreSQL 在 Next.js / Go 全栈架构中的工程化实践

本文详解如何利用Next.js(搭配Drizzle ORM)与Go后端构建高性能应用,充分发挥PG在JSONB非结构化存储与pgvector向量检索上的优势。从数据建模到Docker容器化部署,打造支持AI时代的“One Database”工程化解决方案。

921

2026.05.08

PostgreSQL高级特性、内核机制与现代数据架构
PostgreSQL高级特性、内核机制与现代数据架构

本专题从MVCC并发控制与WAL日志等内核机制出发,详解JSONB、PostGIS及pgvector等高级特性。探讨如何利用单一引擎支撑关系型、向量及图数据等现代数据架构需求,助您掌握构建高并发、智能化应用的核心技术。

264

2026.05.08

GoFrame框架Web开发与路由中间件
GoFrame框架Web开发与路由中间件

本专题聚焦GoFrame框架的Web开发,拆解路由注册与匹配规则、请求参数获取、参数校验与中间件执行顺序,说明统一响应、JWT鉴权、文件上传与接口文档生成的落地方式,并补充优雅重启与测试实践。

20

2026.11.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn