讲师中心 微信公众号
AI工具推荐 视频效率加速

如何排查由于单次 SQL 查询未加 LIMIT 限制,误全表扫描回传 500 万条记录引发的瞬间 OOM

大强君_2899

大强君_2899

发布时间:2026-05-30 15:33:59

|

449人浏览过

|

来源于php中文网

原创

单条无LIMIT、无WHERE的SQL触发全表扫描并加载全部500万行至JVM堆内存,是典型的查询型OOM;需通过应用堆栈、慢查日志Rows_examined/Rows_sent、Sending data状态三处信号快速确认,并立即加LIMIT止血、建索引优化、启用流式查询防控。

如何排查由于单次 sql 查询未加 limit 限制,误全表扫描回传 500 万条记录引发的瞬间 oom

直接锁定问题根源:单条 SQL 无 LIMIT、无 WHERE,触发全表扫描并把全部 500 万行结果一次性加载进 JVM 堆内存,是典型的“查询型 OOM”——不是内存泄漏,而是瞬时内存需求远超堆上限。

一、快速确认是否为该类 SQL 引发的 OOM

不翻完整日志,只抓三处关键信号:

  • 应用日志中出现 java.lang.OutOfMemoryError: Java heap space,且紧邻其上的堆栈含 queryForList、executeQuery、MysqlIO.readSingleRowSet 等 JDBC 数据读取方法;
  • MySQL 慢查日志(slow_query_log)里存在执行时间短但 Rows_examined 极高(如 500w+)、Rows_sent 同样为 500w+ 的语句;
  • 用 SHOW PROCESSLIST 或 performance_schema.threads 观察到某连接长时间处于 Sending data 状态,且 Info 字段显示的是无条件 SELECT 语句。

二、定位肇事 SQL 的实操路径

分三步向下穿透,避免陷入底层异常细节:

  • 看业务入口:从报错堆栈最上层的 Controller 或 Service 方法名入手(如 expireHoles、syncAllUsers),确认是哪个业务动作触发;
  • 查 DAO 层调用:找到对应方法中使用的 SQL 模板或 Mapper XML,检查是否硬编码了 SELECT * FROM xxx;
  • 验实际执行语句:开启 MySQL 的 general_log(临时),或在应用侧加日志打印最终拼接出的完整 SQL,确认它确实不含 WHERE、ORDER BY、LIMIT 任何约束。

三、立即止血与长效防控

线上优先保服务,再堵漏洞:

  • 紧急止血:在应用代码中对该 SQL 强制增加 LIMIT 1000(或按业务允许的最大值),并加 try-catch 包裹,防止再次崩掉整个服务线程;
  • SQL 层加固:在 MySQL 配置中设置 max_allowed_packet 合理上限(防大结果集传输),并启用 sql_safe_updates=ON(虽不直接限制 SELECT,但可联动规范开发习惯);
  • 开发侧卡点:在 CI 流程中加入 SQL 静态扫描规则,自动拦截无 WHERE + 无 LIMIT 的 SELECT 语句;在 MyBatis XML 中统一使用 <if test="page != null">LIMIT #{page.size}</if> 模板,禁止裸写 SELECT;
  • 替代方案落地:对确需全量导出的场景,改用流式查询(MyBatis 的 Cursor、JDBC 的 setFetchSize(Integer.MIN_VALUE))或分页拉取(WHERE id > ? ORDER BY id LIMIT 1000),避免内存驻留。

四、顺手检查 MySQL 是否已因该查询受伤

这类查询不仅压垮应用,也极易拖垮数据库本身:

  • 执行 EXPLAIN 查看该 SQL 的 type 是否为 ALL(全表扫描),若是,立刻建索引(如 CREATE INDEX idx_status ON table_name(status));
  • 检查 SHOW GLOBAL STATUS LIKE 'Created_tmp_tables' 是否突增——说明正在大量生成内存临时表,进一步加剧内存压力;
  • 观察 innodb_buffer_pool_pages_free 是否持续走低,确认 Buffer Pool 是否被大结果集缓存挤占,影响其他查询性能。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
mybatis一级缓存和二级缓存
mybatis一级缓存和二级缓存

在MyBatis中,一级缓存和二级缓存是两种不同级别的缓存机制,它们都可以用来提高性能。本专题提供mybatis一级缓存和二级缓存相关文章,大家可以免费阅读。

583

2023.08.21

ibatis和mybatis有什么区别
ibatis和mybatis有什么区别

ibatis和mybatis的区别:1、基本信息不同;2、开发时间不同;3、功能与易用性;4、配置文件;5、入参类型与出参类型;6、返回结果集接受方式;7、语法差异;8、数据库方言支持;9、插件支持;10、社区活跃度;11、全球化支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2542

2024.02.23

mybatis如何配置数据库连接
mybatis如何配置数据库连接

mybatis配置数据库连接的方法:1、指定数据源;2、配置事务管理器;3、配置类型处理器和映射器;4、使用环境元素;5、配置别名。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

446

2024.02.23

mybatis工作原理及流程是什么
mybatis工作原理及流程是什么

mybatis工作原理及流程:1、配置文件;2、接口与映射;3、sql解析与生成;4、执行计划;5、结果处理;6、动态sql;7、缓存机制;8、插件;9、事务管理;10、日志与监控;11、扩展性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

292

2024.02.23

hibernate和mybatis有哪些区别
hibernate和mybatis有哪些区别

hibernate和mybatis的区别:1、实现方式;2、性能;3、对象管理的对比;4、缓存机制。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

302

2024.02.23

Java MyBatis框架
Java MyBatis框架

本专题专注于Java主流ORM框架MyBatis的应用,系统讲解SQL映射、动态SQL、结果映射、分页查询、缓存机制与多表关联等核心内容,并结合企业管理系统、电商平台和后台管理项目实战,帮助学员全面掌握高效的数据库持久层开发技能。

5809

2025.08.26

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

20

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

20

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

20

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn