0

0

/dev/shm 被塞满导致 Redis / PostgreSQL / Java 崩溃的业务场景

冷炫風刃

冷炫風刃

发布时间:2026-01-29 18:31:20

|

844人浏览过

|

来源于php中文网

原创

/dev/shm 被塞满会直接触发 OOM Killer 或导致进程写入失败,Redis、PostgreSQL、Java 等依赖共享内存的应用可能静默崩溃或拒绝服务;根本原因是 fork()、shm_open() 等系统调用在 /dev/shm 空间不足时失败,且默认 64MB 容量远低于实际需求,需通过限制大小、隔离路径和显式清理防范。

/dev/shm 被塞满导致 redis / postgresql / java 崩溃的业务场景

/dev/shm 被塞满会直接触发 OOM Killer 或导致进程写入失败,Redis、PostgreSQL、Java(尤其是使用 tmpfs 做堆外缓存或 JNI 共享内存的场景)都可能静默崩溃或拒绝服务——这不是配置问题,是资源耗尽的硬限制。

为什么 /dev/shm 满了会让 Redis 崩溃

Redis 默认使用 fork() 做 RDB 快照,而 Linux 的 fork()/dev/shm 启用 tmpfs 且未设限的情况下,会尝试为写时复制(COW)页表分配共享内存空间。如果 /dev/shm 已满,fork() 返回 -1,Redis 日志里出现 Can't save in background: fork: Cannot allocate memory,接着主进程可能因 BGSAVE 失败重试、OOM 被杀,或降级为只读。

  • /dev/shm 默认大小通常是 64MB(部分发行版为 2GB),远小于 Redis 实际内存占用,极易触顶
  • 即使没开 save 配置,某些模块(如 Redis Modules 使用 malloc + mmap(MAP_SHARED))也会往 /dev/shm 写临时段
  • vm.overcommit_memory=2 下更敏感:内核严格校验可用内存,fork() 失败概率陡增

PostgreSQL 的 shared_buffers 不走 /dev/shm,但 wal_buffers 和 parallel query 可能踩坑

PostgreSQL 主内存不依赖 /dev/shm,但它在启用 huge_pages=on 且系统配置了 hugetlb_shm_group 时,会通过 shmget() 创建大页共享内存段;更常见的是 WAL buffer 刷盘前的临时映射、并行查询 worker 进程间通信(DynamicSharedMemory)——这些路径在高并发写入或并行度 > 10 时,会密集创建/销毁匿名 tmpfs 文件,堆积在 /dev/shm

  • 典型错误:could not resize shared memory segment "/PostgreSQL.XXXXX": No space left on device
  • pg_stat_activity 中大量 parallel worker 状态为 idle in transaction (aborted),实为 shm 分配失败后回滚
  • 检查方法:ls -l /dev/shm | grep PostgreSQL | wc -l,超 500 个临时段就值得警惕

Java 应用(尤其 Spring Boot + Netty / JNA)悄悄往 /dev/shm 写东西

多数人以为 Java 只用堆和本地内存,但 Netty 的 EpollEventLoop、JNA 的 NativeLibrary 加载、甚至某些国产 JDK(如 Dragonwell)的 G1ConcRefinementThreads 共享缓冲区,都会调用 shm_open() 创建命名信号量或环形缓冲区,默认落点就是 /dev/shm。这些文件不会自动清理,重启 JVM 也不删——除非显式调用 shm_unlink()

‎ Gemini Storybook
‎ Gemini Storybook

Google Gemini推出的AI绘本生成工具

下载

立即学习Java免费学习笔记(深入)”;

  • 现象:java.io.IOException: No space left on device,但 df -h 显示磁盘充足,df -h /dev/shm 却是 100%
  • JVM 参数如 -XX:+UseG1GC 本身不写 /dev/shm,但搭配 io.netty:netty-transport-native-epoll 就会
  • 排查命令:find /dev/shm -name "*java*" -o -name "*netty*" -o -name "*jna*" -ls

怎么安全清理和长期防住

别直接 rm -rf /dev/shm/*——正在使用的 shm 对象被删会导致进程 SIGSEGV。必须先识别谁在用,再优雅释放。

  • 查占用者:lsof +D /dev/shm(需 root)或 ipcs -m -p 看 shmid 关联的 pid
  • 清空前先停对应服务:比如 systemctl stop redisfind /dev/shm -name "redis-*" -delete
  • 永久方案不是扩容,而是限制+隔离:
    – 修改 /etc/fstab 行:tmpfs /dev/shm tmpfs defaults,size=1g,mode=1777 0 0(避免默认 64MB)
    – 给关键服务分配独立 shm 目录:mkdir /dev/shm/redis && mount --bind /dev/shm/redis /dev/shm(仅限单实例)
    – Java 应用加启动参数:-Dio.netty.native.workdir=/tmp/netty-shm,避开 /dev/shm

最麻烦的不是清理,是那些没显式关闭 shm 的 C/C++ 扩展或老旧 JNI 库——它们可能只在进程退出时才释放,而 Java 进程又常驻不退。这种 case 必须翻源码确认 shm_unlink 调用点,否则监控再全也拦不住泄漏。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
spring框架介绍
spring框架介绍

本专题整合了spring框架相关内容,想了解更多详细内容,请阅读专题下面的文章。

161

2025.08.06

Java Spring Security 与认证授权
Java Spring Security 与认证授权

本专题系统讲解 Java Spring Security 框架在认证与授权中的应用,涵盖用户身份验证、权限控制、JWT与OAuth2实现、跨站请求伪造(CSRF)防护、会话管理与安全漏洞防范。通过实际项目案例,帮助学习者掌握如何 使用 Spring Security 实现高安全性认证与授权机制,提升 Web 应用的安全性与用户数据保护。

89

2026.01.26

spring boot框架优点
spring boot框架优点

spring boot框架的优点有简化配置、快速开发、内嵌服务器、微服务支持、自动化测试和生态系统支持。本专题为大家提供spring boot相关的文章、下载、课程内容,供大家免费下载体验。

139

2023.09.05

spring框架有哪些
spring框架有哪些

spring框架有Spring Core、Spring MVC、Spring Data、Spring Security、Spring AOP和Spring Boot。详细介绍:1、Spring Core,通过将对象的创建和依赖关系的管理交给容器来实现,从而降低了组件之间的耦合度;2、Spring MVC,提供基于模型-视图-控制器的架构,用于开发灵活和可扩展的Web应用程序等。

411

2023.10.12

Java Spring Boot开发
Java Spring Boot开发

本专题围绕 Java 主流开发框架 Spring Boot 展开,系统讲解依赖注入、配置管理、数据访问、RESTful API、微服务架构与安全认证等核心知识,并通过电商平台、博客系统与企业管理系统等项目实战,帮助学员掌握使用 Spring Boot 快速开发高效、稳定的企业级应用。

73

2025.08.19

Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性
Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性

Spring Boot 是一个基于 Spring 框架的 Java 开发框架,它通过 约定优于配置的原则,大幅简化了 Spring 应用的初始搭建、配置和开发过程,让开发者可以快速构建独立的、生产级别的 Spring 应用,无需繁琐的样板配置,通常集成嵌入式服务器(如 Tomcat),提供“开箱即用”的体验,是构建微服务和 Web 应用的流行工具。

154

2025.12.22

Java Spring Boot 微服务实战
Java Spring Boot 微服务实战

本专题深入讲解 Java Spring Boot 在微服务架构中的应用,内容涵盖服务注册与发现、REST API开发、配置中心、负载均衡、熔断与限流、日志与监控。通过实际项目案例(如电商订单系统),帮助开发者掌握 从单体应用迁移到高可用微服务系统的完整流程与实战能力。

273

2025.12.24

Spring Boot企业级开发与MyBatis Plus实战
Spring Boot企业级开发与MyBatis Plus实战

本专题面向 Java 后端开发者,系统讲解如何基于 Spring Boot 与 MyBatis Plus 构建高效、规范的企业级应用。内容涵盖项目架构设计、数据访问层封装、通用 CRUD 实现、分页与条件查询、代码生成器以及常见性能优化方案。通过完整实战案例,帮助开发者提升后端开发效率,减少重复代码,快速交付稳定可维护的业务系统。

35

2026.02.11

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

69

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10.8万人学习

Git 教程
Git 教程

共21课时 | 4.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号