Oracle RAC节点宕机若伴随ORA-27102、PMON terminating due to error 471/484或oom-killer日志,95%是HugePages未真正启用:vm.nr_hugepages配置后需同步设置vm.hugetlb_shm_group(精确为oracle用户主组GID)、永久禁用THP,并通过/proc/meminfo中HugePages_Rsvd>0、进程maps含huge标识及dmesg无fallback提示三重验证。

Oracle RAC 节点宕机若伴随 ORA-27102: out of memory、PMON terminating the instance due to error 471/484 或系统日志出现 oracle invoked oom-killer,95% 是大页(HugePages)没被真正用上,而非物理内存不足。
为什么 vm.nr_hugepages 配了却等于没配
常见错觉:改完 /etc/sysctl.conf 里的 vm.nr_hugepages,执行 sysctl -p 就万事大吉。实际中,HugePages_Rsvd 为 0、HugePages_Free == HugePages_Total 是典型“配置成功但未生效”信号。
- 根本原因不是参数没写对,而是 Oracle 实例压根没拿到大页——
vm.hugetlb_shm_group没设,或设错组 ID,导致 SGA 分配时 fallback 到普通页,最终耗尽内存触发 OOM -
hugepages_settings.sh输出值只是下限,手动四舍五入或直接除 2MB 得到的数字,常因内存对齐、ASM buffer、保留区等多出 20~40 页,导致预留不足 - 多实例 RAC 中,每个节点的脚本输出必须相加,再统一加 5% 余量;不能只按单实例算
检查大页是否真被 Oracle 使用的三步验证法
别只看 /proc/meminfo,要交叉验证进程级行为:
- 运行
grep HugePages /proc/meminfo,确认HugePages_Rsvd > 0(这才是“已预约未使用”),且HugePages_Free - 查 Oracle 进程是否绑定大页:
ps -eo pid,comm,args --sort=-vsz | head -10找ora_pmon_*,看其VSZ是否接近 SGA 设置值;再用cat /proc/<pid>/maps | grep huge</pid>确认映射段含huge标识 - 查内核日志是否有 fallback 提示:
dmesg -T | grep -i "hugetlb",若出现failed to allocate hugepage或falling back to regular pages,说明分配失败已发生
vm.hugetlb_shm_group 必须配且必须配对
这是最常被跳过的硬性条件。只设 nr_hugepages 而不设该参数,等于给 Oracle 开了门却不给钥匙。
- 值必须是 Oracle 软件所有者(通常是
oracle用户)所属主组的 GID,不是用户名,也不是oinstall组名——用id -g oracle精确获取 - 该参数必须写入
/etc/sysctl.conf,且sysctl -p后需验证:cat /proc/sys/vm/hugetlb_shm_group输出应与 GID 一致 - 若集群中多个 Oracle 用户(如
oracle和grid)共存,且都需大页,必须确保它们同属一个组,并用该组 GID 配置此项
禁用透明大页(THP)必须永久,且验证到位
临时执行 echo never > /sys/kernel/mm/transparent_hugepage/enabled 在 reboot 后失效,RAC 节点重启即崩溃。
- 永久禁用路径:编辑
/etc/default/grub,在GRUB_CMDLINE_LINUX行末尾追加transparent_hugepage=never,再运行grub2-mkconfig -o /boot/grub2/grub.cfg并reboot - 验证命令必须两步:
cat /sys/kernel/mm/transparent_hugepage/enabled输出含[never],且grep AnonHugePages /proc/meminfo返回AnonHugePages: 0 kB - 若
AnonHugePages不为 0,说明 THP 仍在后台悄悄分配匿名大页,与 Oracle 的use_large_pages=only冲突,必然导致启动失败或静默 fallback
大页配置不是“设完就跑”,而是一组强耦合参数的协同生效。任何一个环节断链——比如 hugetlb_shm_group 错位、THP 残留、或 hugepages_settings.sh 输出未加余量——都会让整个大页机制退化为摆设,最终在高负载下由 OOM killer 强制终结实例。验证必须落到 /proc 和进程 maps 层,不能只信配置文件存在。


















