讲师中心 微信公众号
AI工具推荐 视频效率加速

Linux怎么排查内存硬件ECC多位不可纠正错误

星瑶酱_3620

星瑶酱_3620

发布时间:2026-10-27 10:52:04

|

570人浏览过

|

来源于php中文网

原创

UE是内存硬件级致命错误,需用dmesg -T | grep -i "ue|uncorrectable"筛选,重点识别“EDAC MC0: UE on CPU#0, channel#0, dimm#1”类日志;UE发生后必须停机换条,因已存在silent data corruption风险。

linux怎么排查内存硬件ecc多位不可纠正错误

怎么从 dmesg 里揪出 UE(Uncorrectable Error)

UE 是内存硬件级致命错误,意味着 ECC 已完全失效,数据大概率已损坏或触发了 NMI 中断。它不会安静地出现在 dmesg 默认输出里,必须用带时间戳、大小写不敏感的关键词组合筛:

  • dmesg -T | grep -i "ue\|uncorrectable\|hardware.*error\|mce.*panic" —— UE 是最短也最可靠的信号,比 uncorrectable 更少被日志截断
  • 重点看含 EDAC MC0: UE on CPU#0, channel#0, dimm#1 这类结构的行:MC0 是内存控制器编号,dimm#1 是逻辑编号,不是物理槽位
  • 若看到 mce: [Hardware Error]: Machine check events logged 但没后续细节,说明内核捕获了 MCE 但未解析出内存位置——此时需立刻查 rasdaemon 日志,不能只信 dmesg

为什么 edac-util -v 看不到 UE 计数增长

edac-util 显示的是 /sys/devices/system/edac/mc/ 下的 sysfs 值,而 UE 事件在现代内核中往往不更新 ue_count 文件,尤其在 Intel Ice Lake+ 或 AMD EPYC 7xx2+ 平台。这不是工具失效,是内核行为变更:

  • UE 通常走 APEI (ACPI Platform Error Interface) 路径,直接进 /sys/firmware/acpi/apei/error_record 或由 rasdaemon 消费 tracefs 事件
  • 运行 cat /sys/devices/system/edac/mc/mc0/dimm0/ue_count 2>/dev/null 返回空或 0,不代表没发生;要对比 cat /sys/devices/system/edac/mc/mc0/csrow0/ue_count 和 csrow1/ue_count 是否非零
  • 更可靠的做法是:先确认 rasdaemon 正在运行(systemctl is-active rasdaemon),再查 journalctl -u rasdaemon --since "2 hours ago" | grep -i "uncorrectable\|memory_uncorrectable_error"

rasdaemon 日志里怎么定位到具体 DIMM 物理位置

rasdaemon 输出的 memory_uncorrectable_error 行含真实物理地址信息,但需要和 BIOS/DMIDECODE 对齐才能落到插槽。关键字段不是 dimm_label(常为空或错),而是 node_id + channel + rank:

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
  • 典型日志:memory_uncorrectable_error: node:0 card:0 module:0 rank:1 bank:0 page:0x1a2b3c row:0x456 col:0x78 —— 其中 node:0 对应 CPU0,card:0 是内存控制器,rank:1 是该 DIMM 的 Rank 编号
  • 用 dmidecode -t memory | grep -A 10 "Locator\|Bank\|Speed" 查物理映射:重点关注 Locator: 字段(如 A1, B2),它才是主板丝印标注的槽位名
  • 交叉验证:若 rasdaemon 报 node:0 rank:1,而 dmidecode 显示 Locator: A1 对应 Rank: 0/1,那大概率就是 A1 槽位的那根条
  • 注意 DDR5 的 On-die ECC(ODECC):rasdaemon 默认只报告主板级纠错,若 ODECC 已修正部分错误,UE 可能被压低——此时需进 BIOS 确认是否启用了 “Memory Mirroring” 或 “Rank Sparing”

UE 出现后还能继续跑业务吗

不能。UE 不是警告,是事后确认:错误已发生,且内核无法修复。哪怕系统没 panic,也极可能已发生 silent data corruption:

  • 数据库 WAL 日志某字节翻转 → 主从不一致;Java 应用对象哈希值错位 → 缓存雪崩;Kubernetes etcd 的 raft term 错乱 → 集群脑裂
  • 不要依赖 memtester 复现:它测的是当前可分配内存,而 UE 往往发生在特定物理页+bank+row 组合,受温度、电压、老化共同影响,压力测试未必触发
  • 唯一稳妥动作:记录所有 rasdaemon 和 dmesg -T 中 UE 时间戳 → 对应时间段内排查是否曾有温升(sensors)、电源波动(ipmitool sdr type "Voltage")、固件更新(dmidecode -s bios-version)→ 然后下电更换对应 DIMM

UE 的麻烦在于它不报错,只“留痕”。你看到的那条日志,已经是硬件故障的终点,不是起点。

热门AI工具

更多
立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4250

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3593

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2833

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

6950

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

6602

2023.07.06

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3793

2023.07.20

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

3285

2023.07.20

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

3519

2023.07.25

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

120

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
安装 Xdebug 并配置 phpstorm
安装 Xdebug 并配置 phpstorm

共1课时 | 193人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn