讲师中心 微信公众号
AI工具推荐 视频效率加速

怎么从底层机制拆解强开透明大页(THP)在垃圾回收大范围扫描物理页时引发的严重长尾

落丽大大_1611

落丽大大_1611

发布时间:2026-06-01 07:33:59

|

770人浏览过

|

来源于php中文网

原创

强开THP=always会显著放大回收长尾延迟,根源在于khugepaged合并争锁、THP同步拆分阻塞、compaction与THP互斥形成恶性循环,三者通过关键内核锁深度耦合。

怎么从底层机制拆解强开透明大页(thp)在垃圾回收大范围扫描物理页时引发的严重长尾

强开透明大页(THP=always)在垃圾回收(尤其是直接回收 Direct Reclaim 或 kswapd 后台回收)过程中,会显著放大物理页扫描的长尾延迟,根源不在“用了大页”,而在于 THP 的合并行为、碎片敏感性与回收路径的深度耦合。下面从三个底层机制层层拆解:

1. khugepaged 合并线程制造隐性内存压力

当 THP 处于 always 模式时,内核后台线程 khugepaged 持续扫描匿名页区域,尝试将 512 个连续 4KB 页合并为一个 2MB THP。这个过程本身不直接触发回收,但会:

  • 频繁调用 isolate_lru_page() 和 try_to_unmap(),反复锁住 anon_vma 和页表项,与回收路径争用同一把锁;
  • 强制拆分已映射的 VMA(如因 mprotect 分裂),导致大量小 VMA 堆积在同一 anon_vma 上——这正是 KSM 反向映射优化所针对的瓶颈场景;
  • 在内存紧张时,合并失败率陡增,khugepaged 会不断重试,形成“无效唤醒风暴”,抬高系统整体调度负载。

2. THP 拆分(splitting)在回收中成为同步阻塞点

当回收器需要释放某 2MB THP 中的个别页(例如该 THP 部分页被修改、部分页需 swap out),内核必须先执行 同步拆分(sync split):

  • 拆分需逐页 lock_page()、清 PTE、迁移内容、更新反向映射,全程不可中断;
  • 若该 THP 被多个进程共享(常见于 fork 后未写时复制的堆内存),还要遍历全部 rmap,触发前述高延迟的 rmap_walk_ksm();
  • 一次拆分可能耗时 10–100ms,在高并发回收场景下,多个线程排队等待同一 THP 拆分完成,形成明显长尾。

3. 内存压缩(compaction)与 THP 共享页框产生恶性循环

当系统出现外部碎片(即有足够空闲页但无连续 2MB 块)时,THP 分配失败会触发 compact_zone()。而 compaction 本身依赖迁移页来整理空间,此时:

  • THP 页面无法被迁移(除非先拆分),导致 compaction 扫描器跳过整块 2MB 区域,有效扫描范围大幅缩水;
  • 为凑出连续空间,compaction 被迫更激进地迁移普通页,进一步加剧 try_to_unmap() 和 rmap_walk() 负载;
  • 若恰有数据库进程正在做大范围 buffer pool 扫描(如 InnoDB LRU 刷新),其访问模式打散物理页局部性,反过来又抑制 THP 合并,使系统在“拼命合并→频繁拆分→持续压缩”之间震荡。

这些机制不是孤立运行,而是通过 anon_vma 锁、页表锁、lru_lock、zone->lock 等关键锁形成连锁阻塞链。实测显示:在 THP=always + 高并发写入的 MySQL 场景下,单次 direct reclaim 的 p99 延迟可突破 800ms,其中 >60% 时间消耗在 THP 相关的拆分与 rmap 遍历上。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

相关专题

更多
PHP2Shell高危漏洞修复教程
PHP2Shell高危漏洞修复教程

PHP2Shell漏洞是什么,哪些PHP版本和运行环境会受到影响,服务器应该如何检测与修复?本专题提供版本自查脚本、Linux与Docker升级命令、PHP-FPM和Apache排查步骤,以及修复验证、临时缓解和应急响应方案。

0

2026.10.22

剧云人物设定与关系管理教程
剧云人物设定与关系管理教程

本专题介绍剧云人物设定与关系管理,讲解角色小传、性格职业、人物目标、背景资料和关系网络的创建及维护方法。

0

2026.10.22

剧云故事大纲与分场规划教程
剧云故事大纲与分场规划教程

本专题讲解剧云梗概与多级大纲功能,覆盖全局、分集、分场结构生成,以及主线冲突、剧情节点和场次顺序调整。

0

2026.10.22

VibeKnow PPT讲解视频教程汇总
VibeKnow PPT讲解视频教程汇总

本专题介绍VibeKnow PPT讲解模式的素材准备、旁白生成、页面节奏、画面呈现与导出设置,适合课程和培训场景。

0

2026.10.22

VibeKnow PDF转视频教程合集
VibeKnow PDF转视频教程合集

本专题围绕VibeKnow的PDF转视频功能,讲解文件准备、内容解析、脚本生成、重点可视化及配音字幕检查方法。

0

2026.10.22

二狗PPT模板与视觉设计
二狗PPT模板与视觉设计

本专题介绍二狗PPT的职场模板、主题风格与页面版式,覆盖模板切换、色彩选择、内容匹配和正式汇报场景下的视觉优化方法。

0

2026.10.22

php漏洞修复方法
php漏洞修复方法

PHP漏洞聚合专题,持续整理PHP最新高危漏洞、CVE安全预警、受影响版本、自查命令及修复方案,覆盖PHP-FPM、Docker、Ubuntu与Linux服务器环境,帮助开发者快速完成漏洞排查、版本升级和安全加固。

20

2026.10.22

二狗PPT入门与基础操作
二狗PPT入门与基础操作

本专题整理二狗PPT从官网进入、输入主题、生成大纲到制作成稿的基础操作,帮助新手掌握AI一键生成职场PPT的完整流程。

0

2026.10.22

讯飞绘文AI配图与绘图模型合集
讯飞绘文AI配图与绘图模型合集

本专题讲解讯飞绘文AI配图与绘图2.0 Pro,覆盖提示词、画面比例、参考图、风格选择及图片优化,帮助用户制作匹配内容的视觉素材。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn