0

0

Python怎么限制文件大小写入_日志轮转RotatingFileHandler

P粉602998670

P粉602998670

发布时间:2026-03-18 10:03:25

|

450人浏览过

|

来源于php中文网

原创

RotatingFileHandler通过maxBytes和backupCount按字节大小轮转日志:maxBytes设单文件最大字节数(如1MB),backupCount设保留备份数(如3个),写满后重命名并滚动删除最老备份;注意非实时触发、非进程安全、需确保目录权限及编码显式指定。

python怎么限制文件大小写入_日志轮转rotatingfilehandler

RotatingFileHandler 怎么按大小切分日志文件

maxBytesbackupCount 两个参数控制。前者设单个日志文件最大字节数,后者决定保留几个历史备份文件。比如设 maxBytes=1048576(1MB),backupCount=3,那么当前日志写满 1MB 后会重命名为 app.log.1,已有 .1 变成 .2,依此类推,超过 3 个就删最老的。

注意:这个“大小”是按字节算的,不是行数或条数;而且只有在下一次 handler.emit()(即真正写日志)时才触发检查和轮转,不是实时监控。

  • maxBytes 设太小(如 1024)会导致频繁 rename,IO 压力大,尤其在高并发写日志时
  • backupCount=0 表示不保留备份,写满就覆盖原文件——这基本等于没轮转,慎用
  • 中文、emoji 等 UTF-8 多字节字符会让实际文件体积比字符串长度大,别拿 len("xxx") 直接当字节数估算

为什么日志没按预期大小轮转

常见原因是没关掉 delay=True 或者用了错误的初始化时机。默认 delay=False,Handler 构造时就会打开文件;如果此时目标路径不存在或权限不足,会静默失败,后续写日志直接丢弃,自然也不会触发轮转。

另一个坑是多个进程共用同一个日志文件——RotatingFileHandler 是线程安全的,但**不是进程安全的**。多进程下可能同时判断“还没满”,然后一起往同一个文件里写,导致大小失控、备份错乱甚至文件损坏。

立即学习Python免费学习笔记(深入)”;

Ai好记
Ai好记

强大的AI音视频转录与总结工具

下载
  • 启动前确保日志目录存在且 Python 进程有写权限,否则 FileNotFoundErrorPermissionError 可能被吞掉
  • 多进程场景必须换方案,比如用 ConcurrentRotatingFileHandler(第三方),或统一走 syslog / Kafka / 文件队列
  • 调试时加一句 print(handler.stream) 确认文件确实打开了,而不是 None

RotatingFileHandler 和 TimedRotatingFileHandler 选哪个

只看“按大小轮转”,就用 RotatingFileHandler。它响应快、逻辑简单、无时间漂移。而 TimedRotatingFileHandler 是按小时/天切,内部靠定时器+文件修改时间判断,容易因系统时间跳变、进程重启、低频写入导致切分延迟或遗漏,不适合对体积敏感的场景。

但要注意:RotatingFileHandler 不管时间,哪怕一整天只写 1KB,也不会生成新文件;而如果你既要控大小又要保时效(比如“每 10MB 或每天凌晨切一次”),它俩都做不到——得自己封装逻辑,或改用 watchdog + 定时检查 + 手动 doRollover()

  • 日志量稳定、带宽/磁盘有限(如嵌入式设备)→ 死守 RotatingFileHandler + 合理 maxBytes
  • 需要归档到日期目录(如 logs/2024-06-01/app.log)→ TimedRotatingFileHandler 更合适,别硬套大小逻辑
  • 混合策略需求强烈,又不想引入新依赖 → 直接监听 os.path.getsize(),在每次写日志前手动判断并调用 handler.doRollover()

Python 3.12+ 的一个兼容性细节

从 Python 3.12 开始,RotatingFileHandler 初始化时如果 encodingNone(默认),底层会用 locale.getpreferredencoding(False) 推导编码;之前版本用的是 sys.getdefaultencoding()。这意味着在某些非 UTF-8 系统 locale 下(比如 LANG=C),可能意外写入乱码,尤其当日志含中文时。

这不是 bug,但容易被忽略——因为错误发生在写入阶段,报错信息却指向编码不匹配,跟轮转逻辑无关,排查路径容易跑偏。

  • 显式指定 encoding="utf-8",一劳永逸
  • 避免依赖系统 locale,尤其容器环境里 LANG 常为空或 C
  • 如果必须动态编码,记得在构造 handler 前先测试 open(..., encoding=xxx) 能否正常写入中文
实际轮转行为取决于你第一次写日志时的文件状态、当时磁盘是否可写、有没有其他进程正在占用文件——这些条件凑不齐,maxBytes 就只是个摆设。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
kafka消费者组有什么作用
kafka消费者组有什么作用

kafka消费者组的作用:1、负载均衡;2、容错性;3、广播模式;4、灵活性;5、自动故障转移和领导者选举;6、动态扩展性;7、顺序保证;8、数据压缩;9、事务性支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

176

2024.01.12

kafka消费组的作用是什么
kafka消费组的作用是什么

kafka消费组的作用:1、负载均衡;2、容错性;3、灵活性;4、高可用性;5、扩展性;6、顺序保证;7、数据压缩;8、事务性支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

159

2024.02.23

rabbitmq和kafka有什么区别
rabbitmq和kafka有什么区别

rabbitmq和kafka的区别:1、语言与平台;2、消息传递模型;3、可靠性;4、性能与吞吐量;5、集群与负载均衡;6、消费模型;7、用途与场景;8、社区与生态系统;9、监控与管理;10、其他特性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

207

2024.02.23

Java 流式处理与 Apache Kafka 实战
Java 流式处理与 Apache Kafka 实战

本专题专注讲解 Java 在流式数据处理与消息队列系统中的应用,系统讲解 Apache Kafka 的基础概念、生产者与消费者模型、Kafka Streams 与 KSQL 流式处理框架、实时数据分析与监控,结合实际业务场景,帮助开发者构建 高吞吐量、低延迟的实时数据流管道,实现高效的数据流转与处理。

182

2026.02.04

python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end=' ', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

193

2023.09.27

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

19

2026.02.03

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

761

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

221

2023.09.04

抖漫入口地址合集
抖漫入口地址合集

本专题整合了抖漫入口地址相关合集,阅读专题下面的文章了解更多详细地址。

17

2026.03.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 5.1万人学习

SciPy 教程
SciPy 教程

共10课时 | 2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号