讲师中心 微信公众号
AI工具推荐 视频效率加速

/ dev/shm 被塞满导致 PostgreSQL 或 Redis 崩溃的常见业务场景

千丽姑娘_1617

千丽姑娘_1617

发布时间:2026-01-19 13:32:02

|

951人浏览过

|

来源于php中文网

原创

/dev/shm 是基于内存的tmpfs,默认64MB,PostgreSQL和Redis依赖其创建共享内存段;占满会导致崩溃、启动失败或连接拒绝。PostgreSQL在高并发、逻辑复制、统计扩展等场景易耗尽空间;Redis在AOF重写、模块扩展、容器部署时可能间接触发占用;其他服务残留文件亦会隐形占用。诊断用df -h /dev/shm和ls -l /dev/shm,缓解可清理或扩容至1G,或PostgreSQL v12+改用mmap。

/ dev/shm 被塞满导致 postgresql 或 redis 崩溃的常见业务场景

/dev/shm 是 Linux 系统中基于内存的临时文件系统(tmpfs),默认大小通常为 64MB(部分系统为 512MB 或 1GB,取决于内核版本和配置)。PostgreSQL 和 Redis 都会主动使用 /dev/shm 存放共享内存段,一旦该空间被占满,会导致服务无法创建新的共享内存对象,进而触发崩溃、启动失败或连接拒绝等严重问题。

PostgreSQL 的共享内存需求场景

PostgreSQL 启动时会在 /dev/shm 下创建以 PostgreSQL.xxx 命名的共享内存段,用于进程间通信(如 WAL 共享缓冲、并行查询协调、逻辑复制槽状态等)。以下情况容易快速耗尽 /dev/shm:

  • 高并发连接 + 大量并行查询:每个并行工作进程需额外共享内存页,连接数 × 并行度 × 每个 worker 的 shm 开销可能远超默认容量
  • 启用了逻辑复制且订阅端堆积大量未消费的变更:逻辑解码中间状态缓存会驻留在 /dev/shm
  • 使用 pg_stat_statements 或其他扩展频繁刷新统计信息:某些版本在重载统计时会短暂申请大块共享内存
  • PostgreSQL 版本较老(如 9.6 或更早):对 shm 使用不够节制,且不支持 shared_memory_type = mmap 回退机制

Redis 的共享内存使用场景

Redis 本身不直接依赖 /dev/shm,但以下常见业务集成方式会间接触发其占用:

Java Api Extractor
Java Api Extractor

从 Java 项目中提取 Controller 层接口定义为 JSON 数据。

下载
  • 启用 AOF 重写(BGREWRITEAOF)时配合子进程 fork:虽然 Redis 主要用 copy-on-write,但在某些内核(尤其开启 transparent_hugepage)下,fork 可能触发 tmpfs 映射,临时放大内存需求
  • 使用 Redis Modules(如 RedisAI、RedisJSON)进行大模型推理或批量解析:部分模块为加速数据交换,主动在 /dev/shm 创建命名信号量或共享缓冲区
  • 部署在容器中且未限制 shm 大小:Docker 默认只给容器 64MB /dev/shm,Kubernetes Pod 若未设置 securityContext.shmSize,也会继承该限制,而 Redis Cluster 节点间通信或 Lua 脚本大量调用 redis.call() 可能累积 shm 对象

被忽略的“隐形”占用源

除数据库自身外,同一台机器上的其他服务或脚本也可能持续写入 /dev/shm,导致 PostgreSQL/Redis 启动时“莫名失败”:

  • Python 多进程程序(如使用 multiprocessing.SharedMemory)未显式 .close() 和 .unlink(),残留 shm 对象长期不释放
  • Java 应用使用 java.nio.channels.FileChannel.map() 映射 /dev/shm 下的文件,JVM 退出异常时未清理映射
  • 监控 agent(如 collectd、telegraf)采集进程指标时,将临时元数据写入 /dev/shm 且未轮转清理
  • CI/CD 构建脚本临时解压大型归档包到 /dev/shm(误以为“快”就安全),忘记清理

快速诊断与缓解建议

发现崩溃后,优先确认 /dev/shm 实际使用情况:

  • 运行 df -h /dev/shm 查看使用率;ls -l /dev/shm/ 列出对象,重点关注 PostgreSQL.*、sem.*、redis.* 等前缀文件
  • 用 ipcs -m 查看系统级共享内存段(注意:tmpfs 中的文件不显示在此,但传统 shm 段会)
  • PostgreSQL 启动失败时检查日志关键词:could not create shared memory segment 或 No space left on device
  • 临时缓解:清空非关键 shm 文件(rm -f /dev/shm/PostgreSQL.* /dev/shm/sem.*),但需确保无活跃数据库进程
  • 长期方案:调整 /dev/shm 大小(如挂载时指定 size=1G),或让 PostgreSQL 使用 mmap(shared_memory_type = mmap,v12+ 支持),Redis 容器明确设置 --shm-size=1g

热门AI工具

更多
切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

花生AI
花生AI Hot

一款AI视频创作工具,主要用于B站推出的AI视频创作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
Java I/O 与 NIO 编程体系合集
Java I/O 与 NIO 编程体系合集

全面讲解 Java I/O 编程的演进与核心 API,涵盖传统 I/O 的字节流(InputStream/OutputStream)与字符流(Reader/Writer)体系、装饰器模式在 I/O 中的应用(BufferedReader/InputStreamReader)、文件读写与目录操作、NIO 核心三要素(Buffer 缓冲区/Channel 通道/Selector 选择器)、ByteBuffer 操作与内存映射文件(Mappe

492

2026.04.29

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

6587

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2728

2023.08.10

golang map内存释放
golang map内存释放

本专题整合了golang map内存相关教程,阅读专题下面的文章了解更多相关内容。

690

2025.09.05

golang map相关教程
golang map相关教程

本专题整合了golang map相关教程,阅读专题下面的文章了解更多详细内容。

343

2025.11.16

golang map原理
golang map原理

本专题整合了golang map相关内容,阅读专题下面的文章了解更多详细内容。

553

2025.11.17

java判断map相关教程
java判断map相关教程

本专题整合了java判断map相关教程,阅读专题下面的文章了解更多详细内容。

303

2025.11.27

k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

785

2023.07.24

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

0

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn