0

0

Python 日志打印对性能的真实影响

舞夢輝影

舞夢輝影

发布时间:2026-02-15 18:38:59

|

293人浏览过

|

来源于php中文网

原创

日志性能损耗主要来自参数求值、格式化、时间戳获取和栈帧解析。debug级别下即使不输出,参数仍会执行;应使用isenabledfor或延迟计算;basicconfig默认配置不适用于生产;高频日志需限流;%(pathname)s等字段性能差;异步环境中需防丢日志。

python 日志打印对性能的真实影响

日志级别设为 DEBUG 时,字符串拼接本身就会拖慢程序

很多同学以为“只要没输出,日志就不耗性能”,其实不对。Python 的 logging.debug() 在调用时,哪怕日志器最终丢弃这条消息(因为级别不够),debug() 的参数仍会照常求值——包括字符串格式化、函数调用、变量访问。比如:

logging.debug("user_id=%s, balance=%.2f", user.id, get_balance(user))

即使当前日志级别是 WARNINGuser.idget_balance(user) 依然会被执行。

  • 真正安全的写法是用 logger.isEnabledFor(logging.DEBUG) 包一层,或者直接用 lazy 格式:用 lambda 或方法引用延迟计算
  • 更推荐的惯用写法是把复杂表达式移到条件块里:if logger.isEnabledFor(logging.DEBUG): logger.debug("…", expensive_value())
  • 别依赖 %.format() 的“惰性”——它们不惰性;f-string 更危险,它在调用前就完成了所有求值

logging.basicConfig() 的默认行为在生产环境几乎总是错的

本地调试时随手加一句 logging.basicConfig(level=logging.INFO) 很方便,但它会悄悄创建一个 StreamHandler 绑定到 root logger,并且没有设置 formatterfilter。上线后问题就来了:

  • 多模块导入时,basicConfig() 只生效一次,后续模块的日志可能被静默吞掉或重复输出
  • 它默认用 sys.stderr,而容器或 systemd 环境中 stderr 写入可能触发锁或缓冲问题,尤其高并发时
  • 没有设置 propagate=False,子 logger 会向上冒泡到 root,导致同一条日志打两遍

线上应该显式配置 handler,比如:

AI工具箱导航
AI工具箱导航

AMZ123旗下的AI工具导航网站

下载

立即学习Python免费学习笔记(深入)”;

handler = logging.FileHandler("/var/log/app.log")<br>handler.setFormatter(logging.Formatter("%(asctime)s %(levelname)s %(name)s: %(message)s"))<br>logger.addHandler(handler)<br>logger.setLevel(logging.INFO)<br>logger.propagate = False

频繁调用 logger.info() 但内容不变,CPU 花在哪儿了?

看起来只是打一行固定字符串,比如 logger.info("request started"),但每次调用仍要走完整路径:检查级别 → 获取线程/进程 ID → 获取时间戳 → 格式化 → 编码 → 写入 buffer。其中最重的是时间戳获取和 formatter 调用。

  • 如果某条日志高频出现(如每毫秒一次),建议先用 time.time()time.monotonic() 做粗粒度限流,而不是靠日志级别压制
  • 避免在循环内无条件打 info 日志;改用计数器 + 条件触发,例如 “每 100 次请求打一次 summary”
  • formatter 中的 %(pathname)s%(funcName)s 会触发栈帧解析,比 %(message)s 慢 3–5 倍,生产环境应禁用

异步框架(如 FastAPI / Quart)里用标准 logging 不会阻塞,但可能丢日志

标准 logging 是同步的,但在 asyncio 场景下,它不会阻塞 event loop——因为写文件或 socket 是系统调用,Python 的 logging 模块本身不主动 await。真正的问题是生命周期错配:

  • 协程退出时,handler 的 buffer 可能还没 flush,尤其用 RotatingFileHandler 时,最后几条日志永远不落地
  • 多 worker 进程(如 uvicorn --workers 4)共用一个 log 文件,若没加 delay=True 和文件锁,会出现日志截断或乱序
  • 推荐做法:用 QueueHandler + 后台线程消费,或直接切到 structlog + asyncio.Queue,避免主线程和 I/O 线程争抢

最常被忽略的一点:日志不是越全越好,而是要在可追溯性和性能损耗之间做显式取舍。比如 trace_id 可以用 extra 传入,但别每次都在 formatter 里调用 trace.get_current_span() —— 那个函数本身就要查上下文、加锁、生成新对象。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

27

2025.12.22

Python 微服务架构与 FastAPI 框架
Python 微服务架构与 FastAPI 框架

本专题系统讲解 Python 微服务架构设计与 FastAPI 框架应用,涵盖 FastAPI 的快速开发、路由与依赖注入、数据模型验证、API 文档自动生成、OAuth2 与 JWT 身份验证、异步支持、部署与扩展等。通过实际案例,帮助学习者掌握 使用 FastAPI 构建高效、可扩展的微服务应用,提高服务响应速度与系统可维护性。

198

2026.02.06

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

730

2023.08.02

if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

811

2023.08.22

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

865

2023.07.31

python中的format是什么意思
python中的format是什么意思

python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

446

2024.06.27

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

551

2023.08.03

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

214

2023.09.04

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

139

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号