0

0

Redis如何评估fsync延迟带来的风险_分析AOF everysec在最坏情况下的2秒数据丢失

P粉602998670

P粉602998670

发布时间:2026-03-13 12:20:03

|

393人浏览过

|

来源于php中文网

原创

AOF everysec最多丢2秒数据,因fsync依赖事件循环空闲触发,主线程阻塞会导致调度延迟,最坏情况下两次fsync间隔接近2秒。

redis如何评估fsync延迟带来的风险_分析aof everysec在最坏情况下的2秒数据丢失

为什么AOF everysec 会丢最多2秒数据

因为Redis的AOF everysec 模式下,写命令先追加到内存缓冲区(aof_buf),再由后台线程每秒调用一次 fsync 刷盘。但这个“每秒”不是严格定时器——它依赖事件循环空闲时触发,若主线程持续忙碌(比如大key删除、复杂Lua脚本),fsync 可能被延迟;更关键的是,如果在上一次 fsync 完成后、下一次开始前这整段时间内进程崩溃,所有尚未落盘的缓冲区数据就丢了。

  • 最坏延迟 = 上次 fsync 完成时刻 → 下次 fsync 开始时刻,理论最大接近2秒(例如上次在0.9s完成,下次因阻塞拖到2.8s才启动)
  • 这不是bug,是设计取舍:用可控延迟换性能,always 虽不丢但吞吐暴跌,no 则完全交由OS决定,风险更高
  • 注意:Linux的 fsync 在某些存储设备(如部分NVMe或启用了写缓存的RAID卡)上可能返回过快,实际数据仍在设备缓存中,此时“2秒”只是OS层面的保证,物理落盘仍可能滞后

如何确认当前实例是否真正在承受fsync延迟

不能只看配置是 everysec,得验证实际行为。Redis本身不直接暴露fsync耗时,但可通过两个指标交叉判断:

  • 观察 INFO persistence 中的 aof_delayed_fsync:该计数器每次因主线程忙而跳过本次fsync时+1,值持续增长说明调度已受挤压
  • 检查 aof_last_fsyncaof_current_rewrite_time_sec 的差值(需排除rewrite干扰),若长期 > 1.5s,基本可判定存在延迟
  • 更准的方式是用 strace -p $(pidof redis-server) -e trace=fsync 抓系统调用,看两次 fsync 间隔和单次耗时(注意别在生产高频实例上长时运行)

哪些操作会让fsync更容易超时

任何让主线程长时间无法进入事件循环的操作,都会挤压 fsync 的执行窗口。典型场景包括:

PathFinder
PathFinder

AI驱动的销售漏斗分析工具

下载
  • 同步删除大key(DEL 一个几GB的hash)—— Redis 6.0+ 默认异步,但若配置了 lazyfree-lazy-user-del no 或使用旧版本,就会阻塞
  • 执行耗时Lua脚本(尤其含循环或大量 redis.call())—— 脚本全程在主线程运行,期间不处理任何其他事件
  • 主从全量同步时的RDB生成(save 进程虽是子进程,但fork瞬间会触发写时复制,造成主线程卡顿,间接影响后续fsync调度)
  • 开启 activedefrag 且内存碎片率高时,后台整理也会周期性占用CPU时间片

想降低丢数据风险,但又不想切always,有什么折中办法

没有银弹,但可以分层控制风险面:

  • 把写敏感业务拆到单独Redis实例,禁用AOF,改用RDB + 主从复制(靠 repl-backlog 缓冲和从库实时同步来保可用性)
  • 对必须开AOF的实例,确保磁盘I/O能力冗余:用XFS文件系统(比ext4更稳)、关闭磁盘写缓存(hdparm -W0 /dev/sdX)、避免与日志/数据库混用同一块盘
  • 监控 aof_delayed_fsync 增速,结合业务峰值设置告警(例如5分钟内增长 > 10次,说明fsync已开始失守)
  • 接受“2秒”是理论上限,实际线上多数情况丢失在毫秒级——真正危险的是连续多次延迟叠加,所以重点盯住延迟是否常态化,而不是纠结单次数字

真正难处理的,是那些既要求低延迟写入、又要求强持久化的场景:fsync本身不可绕过,而硬件和内核的不确定性永远存在。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

765

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

765

2023.08.10

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1007

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

671

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

501

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

413

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

408

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

484

2024.04.07

Python异步编程与Asyncio高并发应用实践
Python异步编程与Asyncio高并发应用实践

本专题围绕 Python 异步编程模型展开,深入讲解 Asyncio 框架的核心原理与应用实践。内容包括事件循环机制、协程任务调度、异步 IO 处理以及并发任务管理策略。通过构建高并发网络请求与异步数据处理案例,帮助开发者掌握 Python 在高并发场景中的高效开发方法,并提升系统资源利用率与整体运行性能。

37

2026.03.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号