0

0

C++如何实现高性能的日志滚动保存_C++封装按大小分割日志类【工程】

冰火之心

冰火之心

发布时间:2026-02-09 15:59:02

|

942人浏览过

|

来源于php中文网

原创

std::ofstream直接轮转易丢日志,因close()不保证落盘且多线程下flush()与close()存在竞态;应显式flush、加锁覆盖完整轮转流程、用临时文件原子替换、维护归档列表并异步清理、解耦格式化与IO以提升性能。

c++如何实现高性能的日志滚动保存_c++封装按大小分割日志类【工程】

为什么 std::ofstream 直接轮转容易丢日志

很多工程实现直接在日志文件达到阈值时关闭旧流、新建文件,但没考虑多线程写入或缓冲区未刷盘的问题。典型表现是:日志刚切到 app.log.1app.log 末尾几行就没了。根本原因是 std::ofstream::close() 不保证立即落盘,且多线程下 flush()close() 之间存在竞态。

实操建议:

立即学习C++免费学习笔记(深入)”;

  • 每次写入后不依赖自动 flush,显式调用 stream.flush()(但别滥用,会影响性能)
  • 轮转前先 stream.flush(),再用 stream.clear() 清除状态位,最后用 stream.open(..., std::ios::out | std::ios::app) 复用对象
  • 避免频繁构造/析构 std::ofstream 对象——它内部有缓冲区分配开销
  • 轮转操作本身必须加锁,且锁粒度要覆盖“检查大小 → flush → rename → reopen”整个流程

按大小滚动时如何安全重命名正在写的文件

Windows 下直接 rename("app.log", "app.log.1") 会失败(文件被占用),Linux 虽支持,但若其他进程正 fopen("app.log", "a"),行为不可控。更稳妥的做法是写完后原子替换,而非原地 rename。

实操建议:

立即学习C++免费学习笔记(深入)”;

  • 写日志始终往 app.log.tmp 写,定期检查大小;达标后 close()rename("app.log.tmp", "app.log.1")
  • 主日志文件永远叫 app.log,只由当前 writer 打开;历史文件用数字后缀,按时间或序号排序归档
  • std::filesystem::rename()(C++17)替代 C 风格 rename(),它对路径合法性有基本检查
  • 注意:Windows 上 rename() 不能跨分区,如果日志目录挂载在不同磁盘,需改用 std::filesystem::copy_file() + std::filesystem::remove()

logrotate 风格的保留策略怎么在 C++ 里轻量实现

工程中不需要完整复刻 logrotate 的配置语法,但得控制磁盘占用。常见错误是遍历所有 *.log.* 文件再排序删除——IO 开销大,且易受文件系统延迟影响。

PathFinder
PathFinder

AI驱动的销售漏斗分析工具

下载

实操建议:

立即学习C++免费学习笔记(深入)”;

  • 维护一个固定大小的 std::vector<:string> 记录最近 N 个归档文件名(如 {"app.log.1", "app.log.2", ...}),每次轮转时 push_front,pop_back
  • 删除动作异步做:轮转完成后发个低优先级任务去删最老的,避免阻塞主线程
  • 检查磁盘剩余空间用 std::filesystem::space(),而不是硬编码保留 1GB;低于阈值时主动触发清理
  • 归档文件名里嵌入毫秒级时间戳(如 app.log.20240520-142301-123),比纯数字序号更容易调试和排查

性能瓶颈往往卡在字符串拼接和 IO 线程争抢

高并发下,每个日志调用都做 std::to_string() + operator+ 拼接,再进 std::ofstream::write(),CPU 和锁竞争双双拉满。实测显示,格式化耗时可能占单条日志 70% 以上。

实操建议:

立即学习C++免费学习笔记(深入)”;

  • fmt::format_to()(或 C++20 std::format_to)替代 std::ostringstream,避免临时 string 分配
  • 日志队列用无锁环形缓冲(如 moodycamel::ConcurrentQueue)把格式化和写入解耦:业务线程只负责 push 格式化后的 std::string_view,后台线程批量 write
  • 避免每条日志都调用 std::chrono::system_clock::now();改用周期性更新的全局时间缓存(误差容忍 100ms 即可)
  • 如果日志量极大(>10k 条/秒),考虑 mmap 写入 + 自定义缓冲区,绕过 libc stdio 层

真正难的不是轮转逻辑,而是让轮转不打断正常写入流——所有原子操作、状态同步、跨平台路径处理,都在那几行 rename()open() 调用背后藏着。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

646

2023.08.02

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

444

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

213

2023.09.04

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

1518

2023.10.24

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

634

2023.11.24

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

800

2024.03.22

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

772

2024.04.29

go语言字符串相关教程
go语言字符串相关教程

本专题整合了go语言字符串相关教程,阅读专题下面的文章了解更多详细内容。

181

2025.07.29

Golang处理数据库错误教程合集
Golang处理数据库错误教程合集

本专题整合了Golang数据库错误处理方法、技巧、管理策略相关内容,阅读专题下面的文章了解更多详细内容。

126

2026.02.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 9万人学习

C 教程
C 教程

共75课时 | 4.6万人学习

C++教程
C++教程

共115课时 | 16.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号