讲师中心 微信公众号
AI工具推荐 视频效率加速

SQL PostgreSQL 的 parallel query 的 worker 分配与成本阈值调优

轻墨酱_7804

轻墨酱_7804

发布时间:2026-02-18 14:03:11

|

1052人浏览过

|

来源于php中文网

原创

PostgreSQL并行查询需协同设置parallel_setup_cost(默认1000,宽表扫描可降至500~800)和parallel_tuple_cost(默认0.1,NVMe可试0.02~0.05),避免小查询滥用worker;需结合max_parallel_workers_per_gather、表大小(relpages≥1000)、事务隔离级别及函数稳定性综合判断是否真正启用并行;验证必须用EXPLAIN (ANALYZE),关注Workers Launched≥1及Worker子节点实际耗时与缓冲命中;parallel_leader_participation控制leader是否参与扫描,默认on,OLTP混合场景建议SET LOCAL设为off。

sql postgresql 的 parallel query 的 worker 分配与成本阈值调优

parallel_setup_cost 和 parallel_tuple_cost 怎么设才不白配

PostgreSQL 的并行查询不会自动“多核全开”,它靠两个成本阈值决定是否启动 worker:一个算“启动开销”,一个算“每条元组传输代价”。设太高,query 直接放弃并行;设太低,小查询硬拉 worker,反拖慢响应。

典型错误是把 parallel_setup_cost 调成 0 —— 看似“全力并行”,实则让 planner 对简单 SELECT COUNT(*) FROM small_table 也启 4 个 worker,CPU 上下文切换+IPC 开销压过收益。

  • parallel_setup_cost 默认 1000,适合中等 OLAP 场景;若大量执行宽表扫描(如 50+ 列、GB 级中间结果),可小幅下调至 500~800
  • parallel_tuple_cost 默认 0.1,对 SSD 集群偏保守;NVMe 或本地盘可试 0.02~0.05,但注意:该值越低,并行越激进,worker 数易超 max_parallel_workers_per_gather
  • 别单独调一个——这两个值必须协同看。比如你把 parallel_tuple_cost 降到 0.03,却没动 parallel_setup_cost,可能触发一堆“小 scan + 大传输”的低效并行

为什么 EXPLAIN 显示 Parallel Seq Scan 却没用上 worker

常见假象:EXPLAIN 输出里有 Parallel Seq Scan,但 EXPLAIN (ANALYZE) 里 Workers Launched: 0。根本原因不是配置没生效,而是 runtime 检查失败。

关键检查点在执行前一刻:planner 生成计划时认为可以并行,但 executor 启动时发现资源被占、表太小、或被显式禁用。

  • 检查 max_parallel_workers_per_gather 是否为 0(默认是 2);设成 0 会直接跳过所有并行分支
  • 确认表大小:若 pg_class.relpages (约 8MB),即使 cost 满足,PG 也可能跳过并行——这是硬编码的底线,不可绕过
  • 留意事务隔离级别:REPEATABLE READ 或 SERIALIZABLE 下,某些并行操作(如带 subplan 的 Gather)会被静默降级
  • 函数内联问题:如果查询含自定义函数且标记为 VOLATILE,PG 会拒绝并行(怕 side effect 不一致)

如何验证实际用了几个 worker 而不是只信 EXPLAIN

EXPLAIN 是预测,EXPLAIN (ANALYZE, BUFFERS) 才是真相。但即使这样,你也得盯住具体字段,否则容易误判。

重点不是看有没有 “Workers Launched”,而是看 “Worker 0”、“Worker 1” 这些子节点是否真跑了、耗时多少、是否空转。

  • 执行 EXPLAIN (ANALYZE, BUFFERS) SELECT ... 后,搜索 Workers Launched: 行,数字必须 ≥1 才算启用
  • 往下找 Worker 0 节点,看它的 Actual Total Time —— 如果比主进程还长,说明 worker 分配不均或数据倾斜
  • 若看到 Worker 0 有 Buffers: shared hit=xxx,但 Worker 1 全是 read=0,大概率是 partition prune 失败或 hash 分布不均
  • 注意:Workers Launched: 2 不代表同时跑满 2 个;若 query 很快结束,可能第二个 worker 根本没拿到任务就退出了

parallel_leader_participation 关键但常被忽略

这个参数控制 leader 进程(即发起查询的 backend)是否参与实际扫描。默认 on,意味着 leader 和 worker 一起干活;设为 off,则 leader 只负责 gather 结果,不扫数据。

它不改变并行度上限,但直接影响 CPU 利用率和响应毛刺。尤其在高并发 OLTP+轻量 OLAP 混合场景,容易踩坑。

  • 设为 off 适合短平快分析查询(如 dashboard 实时指标),避免 leader 被绑死在 I/O 上,影响其他连接响应
  • 设为 on 更适合大吞吐批处理(如 ETL 中间表构建),能更好压满 CPU,但要注意:leader 参与扫描后,work_mem 是 per-worker 计,leader 的那份也会占用,可能触发 spill
  • 该参数不能 ALTER SYSTEM 全局设死——不同业务类型冲突太大;建议在 query 前加 SET LOCAL parallel_leader_participation = off;

并行不是开得越多越好,worker 数量、cost 阈值、leader 是否参战,三者咬合紧密。稍微动一个,就得重看整个执行路径里的 time/buffer 分布,否则优化就变成调参玄学。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4683

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

971

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1229

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6681

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3423

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6660

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

9201

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1250

2024.04.29

Uvicorn 报错与问题解决教程
Uvicorn 报错与问题解决教程

本专题汇总了Uvicorn服务器常见问题与报错解决的教程合集,涵盖启动失败、端口占用、模块导入错误、事件循环冲突及热重载失效等典型故障的排查思路。同时整理了多进程与Worker配置、SSL/HTTPS证书报错、跨域与代理配置等实战解决方案,助你快速定位并解决Uvicorn运行中的各类问题。

0

2026.11.02

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn