0

0

Redis如何解决持久化进程僵死_分析Linux系统的OOM Killer对子进程的误杀

P粉602998670

P粉602998670

发布时间:2026-03-16 10:21:31

|

298人浏览过

|

来源于php中文网

原创

Redis bgsave 失败主因是 Linux OOM Killer 在 fork 后、子进程首次触内存前误杀其子进程,表现为日志报 Failed to fork()、dmesg 显示 killed process redis-server,需通过 dmesg 确认并优化内存使用与 fork 时机。

redis如何解决持久化进程僵死_分析linux系统的oom killer对子进程的误杀

Redis bgsave 为什么突然失败,日志里只看到 Failed to fork()

这不是 Redis 自身 bug,而是 Linux 内核的 OOM Killer 在父进程(Redis server)内存压力大时,把刚 fork 出来的子进程(bgsavebgrewriteaof 子进程)给杀了——它没等子进程真正开始写 RDB,就在 fork() 返回后、exec() 前这个窗口期被干掉了。

典型现象:redis-cli info persistence 显示 rdb_bgsave_in_progress:1,但几秒后变成 0,且 redis.log 出现 Failed to fork(): Cannot allocate memory 或干脆静默失败;用 dmesg -T | grep -i "killed process" 能查到类似 Killed process 12345 (redis-server) 的记录,注意那个 PID 往往是子进程 PID,不是主进程。

  • fork() 成功不代表子进程能活下来:Linux 的 fork() 在启用 vm.overcommit_memory=2 时会做内存预估,但 OOM Killer 的实际裁决发生在子进程首次触碰内存页时,此时它还没执行 write(),只是被当成“潜在吃内存者”误杀
  • Redis 主进程内存越接近系统可用内存上限,风险越高;尤其在使用大量 hash/zset 且启用了 lazyfree-lazy-eviction yes 时,主进程 RSS 高但碎片多,fork() 后子进程 COW 页面实际映射量远超预期
  • 不要依赖 /proc/sys/vm/overcommit_memory 设为 1 来绕过:这会让 fork() 总是成功,但可能引发后续 malloc() 失败或更隐蔽的 OOM,不解决根本问题

怎么确认是不是 OOM Killer 干的

别只看 Redis 日志。OOM Killer 的动作默认不输出到应用日志,必须查内核环缓冲区。

  • 立刻运行 dmesg -T | grep -i "killed process",重点看时间是否和 bgsave 失败时刻吻合,进程名是否含 redis-server
  • 检查 /proc/<redis-pid>/status</redis-pid> 中的 MMUPageSizeMMUPageCount,若后者异常高(比如 > 100 万),说明主进程已积累大量匿名页,fork 开销极大
  • cat /proc/sys/vm/oom_kill_allocating_task 查值:如果是 0(默认),表示内核会扫描所有进程选“最该死”的那个,不一定是当前申请内存的进程;所以子进程被杀很常见

降低 bgsave 被误杀的实际手段

核心思路不是阻止 OOM Killer,而是减少子进程被盯上的概率:让它更轻、更快、更晚触发内存分配。

iMuse.AI
iMuse.AI

iMuse.AI 创意助理,为设计师提供无限灵感!

下载
  • 开启 copy-on-write 友好配置:在 redis.conf 中设 repl-diskless-sync no(避免 diskless sync 和 bgsave 竞争 fork)、activerehashing no(减少主进程后台内存抖动)
  • 控制 RDB 触发节奏:用 save "" 关闭自动 save,改用定时脚本调用 redis-cli bgsave,避开业务高峰;同时确保 stop-writes-on-bgsave-error yes,防止静默失败导致数据丢失
  • 限制单次 fork 开销:如果实例内存 > 10GB,考虑拆分为多个小实例;或者用 redis-cli --pipe + SCAN + DUMP 手动导出(慢但绝对不 fork)
  • 调整内核参数仅作辅助:设 vm.swappiness=1(减少 swap 倾向),但 不要 关闭 swap(OOM Killer 在无 swap 时更激进);可给 Redis 进程设 oom_score_adj = -500echo -500 > /proc/<pid>/oom_score_adj</pid>),但对子进程无效——子进程继承父进程值,而 fork 后它的 oom_score 是独立计算的

为什么不能靠增大系统内存或关闭 OOM Killer 解决

加内存只是推迟问题,关 OOM Killer 会让系统卡死而不是杀进程。

  • OOM Killer 是 Linux 内存管理的最后一道防线;禁用它(如设 vm.panic_on_oom=1)会导致内核 panic,比杀一个子进程严重得多
  • 即使内存翻倍,只要 Redis 使用率长期 > 85%,fork 时的 COW 开销仍可能触发 OOM;特别是使用 jemalloc 且存在大量小对象时,内存碎片会让实际需要的物理页数远高于 INFO memory 显示的 used_memory_rss
  • 真正难处理的是“fork 窗口期”:子进程从 fork() 返回到第一次 write() RDB 文件之间,没有任何 Redis 逻辑可干预,全由内核调度——这也是为什么监控 fork() 耗时(latency monitor)比监控 bgsave 时间更有预警价值

关键点在于:OOM Killer 不针对 Redis,它针对的是“当前最占内存又最容易释放”的进程;而 bgsave 子进程恰好满足“容易释放”(没持有文件句柄、没修改数据)又“看起来很占内存”(COW 映射了全部页表)这两个条件。处理它,得从内存使用模式和 fork 时机入手,而不是指望内核手下留情。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

513

2023.10.18

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

384

2023.10.25

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1007

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

674

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

501

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

416

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

408

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

484

2024.04.07

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

90

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号