0

0

Redis怎样规避RDB引发的系统卡顿_关闭操作系统THP特性防止内存页过大

P粉602998670

P粉602998670

发布时间:2026-03-16 06:49:21

|

333人浏览过

|

来源于php中文网

原创

Redis RDB fork卡顿的根本原因是Linux内核启用THP后,fork()需扫描复制大量2MB大页,导致主线程秒级停顿;须在系统层永久关闭THP(如GRUB加transparent_hugepage=never),并配合调整save策略、禁用AOF重写叠加、设置vm.overcommit_memory=1等措施。

redis怎样规避rdb引发的系统卡顿_关闭操作系统thp特性防止内存页过大

Redis RDB fork卡顿的根本原因在哪

不是 Redis 本身慢,而是 fork() 系统调用在内存大、THP(Transparent Huge Pages)开启时会扫描并复制大量匿名页,导致主线程长时间停顿(有时达秒级)。尤其在物理内存超 32GB、RDB 文件 > 2GB 的场景下,卡顿更明显。

关键点:Linux 内核的 THP 默认启用后,会把原本 4KB 的内存页合并成 2MB 大页;而 fork() 需要为每个子进程建立页表副本——大页越多,复制开销越大,且容易触发写时拷贝(COW)抖动。

怎么关掉 THP(永久生效)

必须在操作系统层关闭,Redis 配置里加任何参数都无效。THP 是内核特性,影响所有进程,不单是 Redis。

  • 检查当前状态:cat /sys/kernel/mm/transparent_hugepage/enabled,若输出含 [always][madvise],说明未关闭
  • 临时关闭(重启失效):echo never > /sys/kernel/mm/transparent_hugepage/enabled
  • 永久关闭:在 /etc/rc.local(systemd 环境下推荐用 /etc/systemd/system/disable-thp.service)中加入上述 echo 命令;或在 GRUB 启动参数加 transparent_hugepage=never,再 update-grub & reboot
  • 注意:有些云厂商(如 AWS EC2 Ubuntu 镜像)默认设为 madvise,看似“安全”,但 Redis 的 malloc 行为常触发 THP 合并,仍需设为 never

RDB 期间还能做哪些减负操作

关 THP 是治本,但配合以下配置可进一步压低 fork 峰值负载:

Typeface
Typeface

AI创意内容创作助手

下载
  • 避免高峰时段触发 RDB:save 300 10 这类低频策略比 save 60 10000 更稳妥,尤其当写入突增时
  • 禁用 auto-aof-rewrite 和 RDB 的同时发生:设置 no-appendfsync-on-rewrite yes,防止 AOF rewrite 叠加 fork 压力
  • 确认 vm.overcommit_memory = 1(而非 0 或 2),避免 fork 因内存预估失败直接返回 ENOMEM
  • 不要用 CONFIG SET save "" 动态清空 save 规则——这会让已排队的 bgsave 仍执行,只是后续不触发;真正想停 RDB,得改配置+重载或直接 redis-cli config rewriteredis-cli bgrewriteaof(如果启用了 AOF)

验证是否真起效了

别只看 enabled 文件内容,得测 fork 耗时是否回落。

  • 监控 INFO persistence 中的 rdb_last_bgsave_time_sec,稳定在 0.1s 内才算达标(之前可能 2~5s)
  • strace -p $(pgrep redis-server) -e trace=fork,clone 观察 fork 返回耗时(需在 bgsave 期间抓)
  • 查内核日志:dmesg | grep -i "thp",确认无 “THP disabled” 以外的警告
  • 注意:容器环境(如 Docker)中,THP 设置需在宿主机生效,容器内 /sys 是只读挂载,改不了

THP 关闭后不会影响 Redis 内存使用量或命中率,但 fork 稳定性会立刻改善。最容易被忽略的是——很多运维只改了 Redis 配置、调了 client-output-buffer-limit,却没碰系统层,结果卡顿照旧。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

786

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

786

2023.08.10

k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

280

2023.07.24

docker进入容器的方法有哪些
docker进入容器的方法有哪些

docker进入容器的方法:1. Docker exec;2. Docker attach;3. Docker run --interactive --tty;4. Docker ps -a;5. 使用 Docker Compose。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

516

2024.04.08

docker容器无法访问外部网络怎么办
docker容器无法访问外部网络怎么办

docker 容器无法访问外部网络的原因和解决方法:配置 nat 端口映射以将容器端口映射到主机端口。根据主机兼容性选择正确的网络驱动(如 host 或 overlay)。允许容器端口通过主机的防火墙。配置容器的正确 dns 服务器。选择正确的容器网络模式。排除主机网络问题,如防火墙或连接问题。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

417

2024.04.08

docker镜像有什么用
docker镜像有什么用

docker 镜像是预构建的软件组件,用途广泛,包括:应用程序部署:简化部署,提高移植性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

454

2024.04.08

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

42

2026.02.11

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1007

2023.11.02

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

69

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号