讲师中心 微信公众号
AI工具推荐 视频效率加速

为什么SQL子查询在WHERE中比JOIN更消耗内存

千静君_4156

千静君_4156

发布时间:2026-10-08 10:15:47

|

555人浏览过

|

来源于php中文网

原创

子查询在WHERE中比JOIN更耗内存,因其常触发逐行物化临时表且无法复用中间结果;而JOIN(如Index Nested-Loop)可流式处理,内存峰值可控。

为什么sql子查询在where中比join更消耗内存

子查询在WHERE中比JOIN更消耗内存,核心原因是它常触发物化临时表 + 无法复用中间结果,而JOIN(尤其Index Nested-Loop)能流式处理、避免全量缓存。

DEPENDENT SUBQUERY 强制逐行物化,内存随主表行数线性暴涨

当EXPLAIN显示select_type为DEPENDENT SUBQUERY时,数据库对主表每一行都重跑一次子查询——每次执行都可能新建临时结果集(哪怕只返回1个值)。例如:

SELECT u.name FROM users u WHERE u.id IN (SELECT o.user_id FROM orders o WHERE o.status = 'shipped')

若users有10万行,且orders没走索引,MySQL可能为每行生成一个独立的临时哈希表或内存排序缓冲区。这不是“一次物化、反复查”,而是10万次物化。

  • 内存分配不可复用:每个子查询实例独占内存空间,GC压力大
  • 临时表无索引:物化结果默认不建索引,后续匹配靠全扫描或哈希查找,CPU和内存双吃紧
  • 优化器无法预估大小:rows列在EXPLAIN里常严重低估,实际内存占用远超tmp_table_size阈值,直接落盘→I/O雪崩

IN/EXISTS子查询的物化策略受配置与数据分布强约束

MySQL 8.0虽支持semi-join,但物化是否发生、用哪种策略(DUPS_WEEDOUT还是FIRSTMATCH),取决于optimizer_switch开关和真实数据特征:

  • subquery_to_derived=off或semijoin=off → 强制退化为DEPENDENT SUBQUERY
  • 子查询含GROUP BY、LIMIT、ORDER BY → 物化失效,改走逐行执行
  • 物化结果集太小(如仅2行)→ 构建临时表开销反而高于NLJ,但内存仍被占用
  • 物化结果集太大(如上万行)→ 触发Using temporary; Using filesort,内存不够就写磁盘临时文件

你看到EXPLAIN FORMAT=JSON里"materialization": true,不代表省内存——它只说明“结果被缓存了”,没说缓存多大、是否索引、是否落盘。

JOIN的内存行为更可控,但前提是驱动表选对、索引到位

Index Nested-Loop Join(NLJ)是内存友好的典型:驱动表每行取值后,直接用被驱动表索引定位匹配行,无需缓存整个中间结果集。

  • 内存峰值≈驱动表单行大小 × 并发数,与被驱动表总行数无关
  • 若驱动表是orders(100万行)、被驱动表是users(1万行),只要orders.user_id有索引,内存压力远小于反向JOIN
  • Hash Join(MySQL 8.0+)需把小表全载入内存建哈希表,此时内存消耗取决于小表大小——但至少是“一次加载、全局复用”
  • 没索引?NLJ退化为Block Nested-Loop,会启用join_buffer_size缓存块,但仍是批量读、非逐行物化

真正卡住你的不是“JOIN or not JOIN”,而是EXPLAIN里type是不是ref/eq_ref、key有没有命中、rows是否接近实际扫描量。

FROM子句子查询不等于物化,CTE更是幻觉

很多人以为WITH tmp AS (SELECT ...)或FROM (SELECT ...) t能自动缓存结果,实际在MySQL和SQL Server里,它们只是语法糖,执行计划中仍会展开多次——每次引用都重跑一遍,内存照样炸。

  • PostgreSQL 12+需显式写WITH tmp AS MATERIALIZED (SELECT ...)才强制物化
  • SQL Server必须用#temp_table,且要立刻建索引:CREATE INDEX IX_user_id ON #tmp(user_id)
  • MySQL只能用CREATE TEMPORARY TABLE tmp AS SELECT ...,再手动ALTER TABLE tmp ADD INDEX(...)

不落地、不索引,所谓“子查询优化”就是把内存压力从运行时搬到了解析时——看起来快了,实则换了个地方爆。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4063

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

871

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1049

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

5941

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2843

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

5920

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

7881

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1070

2024.04.29

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

0

2026.10.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn