0

0

Python 统一日志规范的落地方法

冰川箭仙

冰川箭仙

发布时间:2026-02-05 14:40:03

|

453人浏览过

|

来源于php中文网

原创

日志必须统一用 logging.Formatter 控制格式,禁用字符串拼接;使用标准模板和 python-json-logger;避免提前格式化、硬编码 debug 判断、extra 字段滥用、多进程下非线程安全 handler。

python 统一日志规范的落地方法

日志格式必须统一用 logging.Formatter 控制,别拼字符串

直接用 "%s - %s" % (level, msg)f"{time} {msg}" 会导致字段缺失、时区混乱、无法被 ELK 解析。统一格式的唯一可控入口是 Formatter 实例。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 固定使用 %(asctime)s %(name)s %(levelname)-8s %(funcName)s:%(lineno)d %(message)s 基础模板,asctime 自动带时区(需配 logging.basicConfig(..., datefmt=...)
  • 若需 JSON 输出(如对接 Loki),用第三方库 python-json-logger,而非手写 json.dumps() —— 它能正确处理异常对象、嵌套字典、非字符串 extra 字段
  • 禁止在 logger.info("user_id=%s, action=%s" % (uid, act)) 中提前格式化;应写成 logger.info("user_id=%s, action=%s", uid, act),否则占位符失效且影响性能

不同环境要分开关掉 DEBUG 日志,但不能靠 if DEBUG: 判断

编码 if DEBUG: logger.debug(...) 会绕过日志级别控制,导致生产环境仍执行字符串拼接或函数调用(比如 logger.debug("data=%s", expensive_func())),浪费 CPU 且不可控。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 全局只设一次 logger.setLevel(),开发用 DEBUG,预发/生产强制设为 WARNING 或更高
  • 所有日志调用保持原样,依赖 Logger 自身的级别过滤机制——它会在格式化前就丢弃低优先级消息
  • 检查 root logger 和各模块 getLogger(__name__) 的 handler 是否都继承了同一 level 设置;常见坑是某个 handler 单独 setLevel(DEBUG),导致日志重复或越权输出

extra 字典传参必须预定义字段,禁止运行时自由塞 key

随意用 logger.info("msg", extra={"user_id": 123, "trace_id": "abc"}) 会导致日志结构不一致,下游解析失败(比如 Grafana 查询 trace_id 字段时部分日志缺失该 key)。

亿众购物系统
亿众购物系统

一套设计完善、高效的web商城解决方案,独有SQL注入防范、对非法操作者锁定IP及记录功能,完整详细的记录了非法操作情况,管理员可以随时查看网站安全日志以及解除系统自动锁定的IP等前台简介:  1)系统为会员制购物,无限会员级别。  2)会员自动升级、相应级别所享有的折扣不同。  3)产品可在缺货时自动隐藏。  4)自动统计所有分类中商品数量,并在商品分类后面显示。  5)邮件列表功能,可在线订阅

下载

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 定义一个封装函数,如 log_with_context(logger, level, msg, **kwargs),内部只允许接收白名单字段:user_idtrace_idreq_idip
  • Formatter 中用 %(user_id)s %(trace_id)s 显式声明字段,缺失时自动填 -(通过自定义 Formatter.format() 覆盖实现)
  • 避免在 extra 里传可变对象(如 dict/list),序列化可能出错;一律转成字符串或用 repr() 包裹

多进程场景下,RotatingFileHandler 不安全,改用 ConcurrentRotatingFileHandler

标准库RotatingFileHandler 在多进程写同一个日志文件时会损坏内容(截断、覆盖、乱序),尤其在 logrotate 配合下更明显。

实操建议:

立即学习Python免费学习笔记(深入)”;

  • 安装 concurrent-log-handler 库,替换 handler:from concurrent_log_handler import ConcurrentRotatingFileHandler
  • 注意它的 maxBytesbackupCount 行为与原生一致,但底层用文件锁保证原子写入
  • 若用 systemd 管理多实例,也可考虑按进程名/ID 分日志文件(如 app-worker-001.log),避免共享文件,此时可用原生 handler

统一日志不是加个配置就完事,真正难的是让所有人遵守字段约束、不绕过 level 控制、不在 extra 里自由发挥——这些地方一松动,日志就退化成不可检索的文本堆。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

427

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

540

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

313

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

78

2025.09.10

if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

794

2023.08.22

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

864

2023.07.31

python中的format是什么意思
python中的format是什么意思

python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

439

2024.06.27

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

381

2023.08.03

java中fail含义
java中fail含义

本专题整合了java中fail的含义、作用相关内容,阅读专题下面的文章了解更多详细内容。

0

2026.02.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

相关下载

更多

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 3.9万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号