讲师中心 微信公众号
AI工具推荐 视频效率加速

Ceph集群写满后怎么紧急调大full_ratio强制恢复集群只读救急

轻伟小哥_2506

轻伟小哥_2506

发布时间:2026-10-23 06:43:21

|

773人浏览过

|

来源于php中文网

原创

不能单独调高full_ratio救急,因其仅临时放宽写入限制而不释放物理空间,OSD仍处于full状态,会导致HEALTH_ERR持续、PG卡在backfill_toofull、新写入失败或延迟飙升;必须配合ceph osd pause、降权已满OSD及后续删数据或扩容。

ceph集群写满后怎么紧急调大full_ratio强制恢复集群只读救急

不能只调 full_ratio 就“救急”——它只是临时开个缝,不删数据或扩容,集群很快会再次卡死。

为什么 ceph osd set-full-ratio 不能单独用

调高 full_ratio 只是让 Ceph 暂时忽略“写满”状态,允许继续写入。但它不解决根本问题:磁盘物理空间已耗尽。OSD 仍处于 full 状态,ceph -w 里持续报 HEALTH_ERR,PG 会卡在 backfill_toofull 或 stuck unclean,新写入可能失败或延迟飙升。

常见错误现象包括:

  • rbd rm 报 client.xxx.objecter FULL, paused modify
  • ceph pg dump | grep full 显示大量 backfill_toofull PG
  • ceph osd df 中个别 OSD used% 超过 95%,但其他 OSD 远未满

必须配合 ceph osd pause 和权重调整

直接调 full_ratio 后立刻写入,极易触发回填风暴,把本就吃紧的网络和磁盘压垮。正确顺序是:

  • 先执行 ceph osd pause —— 立即停止所有新写入和自动恢复,避免恶化
  • 再查哪几个 OSD 真正满了:ceph osd df | sort -k7 -n -r | head -5
  • 对满的 OSD 临时降权(比如从 1.0 降到 0.6):ceph osd crush reweight osd.X 0.6,让 CRUSH 少往它上面分新对象
  • 最后调 full_ratio:ceph osd set-full-ratio 0.97(红帽明确警告不要 ≥ 0.97)

注意:reweight 不会立即迁移数据,但能阻止新数据继续涌入已满 OSD,比纯调阈值更可控。

Luminous+ 版本只认 ceph osd set-full-ratio

旧版本(Luminous 之前)用 ceph pg set_full_ratio,但现在这个命令已废弃。如果在 Octopus 或 Quincy 集群里误用,会报错 command not found 或静默失败。

验证是否生效,必须用:

ceph osd dump | grep full_ratio

输出应为类似 full_ratio 0.97。如果仍是 0.95,说明命令没执行成功,常见原因有:

  • 没在 mon 节点执行(cephadm shell 进去再跑)
  • 权限不足(需 root 或 ceph admin keyring)
  • 集群正在重平衡中,命令被排队延迟生效

调完之后最易忽略的三件事

很多人调完 full_ratio 就以为万事大吉,结果几小时后又崩。真正关键的是后续动作:

  • 必须监控 ceph -w 输出,等状态从 HEALTH_ERR 变成 HEALTH_WARN(nearfull)才可考虑 ceph osd unpause
  • ceph df 查具体哪个 pool 占用最高,优先清理:rbd ls -p pool_name | xargs -I{} rbd rm -p pool_name {}(谨慎!确认无业务引用)
  • 调回默认值前,一定要先删够数据——否则还原 full_ratio 0.95 会瞬间锁死集群

临时调高阈值不是解决方案,只是争取出一个安全窗口。真正的出口只有两个:删数据,或者加 OSD。

热门AI工具

更多
PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

0

2026.10.22

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

0

2026.10.22

Gradle怎么构建Java项目
Gradle怎么构建Java项目

本专题介绍Gradle Java项目构建方法,涵盖Java插件配置、依赖声明、源码编译、测试执行和打包检查,帮助你理解各阶段的任务关系,逐步完成项目构建。

0

2026.10.22

PHP时间戳漏洞修复教程
PHP时间戳漏洞修复教程

本专题汇总PHP常见时间戳漏洞,包括2038年溢出、时区漂移、时间戳伪造、重放攻击、时间盲注与日志审计失效等,并给出升级64位环境、使用 DateTimeImmutable、统一UTC、严格超时校验、预处理绑定、hash_equals 比对等修复方案,帮助开发者快速排查和加固时间相关代码。

0

2026.10.22

Golangci-lint配置文件与规则设置
Golangci-lint配置文件与规则设置

本专题聚焦Golangci-lint YAML配置文件,讲清运行参数、规则启停、目录排除、问题过滤及严重级别设置,便于团队统一检查标准。

0

2026.10.22

Golangci-lint安装与入门教程
Golangci-lint安装与入门教程

本专题讲解Golangci-lint的安装、初始化、基础命令和首次代码检查,覆盖本地环境、Docker及多平台用法,帮助Go开发者快速上手。

0

2026.10.22

PHP2Shell高危漏洞修复教程
PHP2Shell高危漏洞修复教程

PHP2Shell漏洞是什么,哪些PHP版本和运行环境会受到影响,服务器应该如何检测与修复?本专题提供版本自查脚本、Linux与Docker升级命令、PHP-FPM和Apache排查步骤,以及修复验证、临时缓解和应急响应方案。

60

2026.10.22

剧云人物设定与关系管理教程
剧云人物设定与关系管理教程

本专题介绍剧云人物设定与关系管理,讲解角色小传、性格职业、人物目标、背景资料和关系网络的创建及维护方法。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
光速学会docker容器
光速学会docker容器

共33课时 | 3万人学习

Docker 17 中文开发手册
Docker 17 中文开发手册

共0课时 | 0人学习

Docker 教程
Docker 教程

共19课时 | 29.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn