0

0

Python 异步程序的可观测性设计

冷漠man

冷漠man

发布时间:2026-02-17 13:36:12

|

416人浏览过

|

来源于php中文网

原创

python异步程序可观测性需五步实现:一、用prometheus-async集成异步指标;二、借contextvars实现日志上下文传递;三、以opentelemetry插件支持协程级分布式追踪;四、通过事件循环异常钩子捕获未处理协程异常;五、暴露asyncio.all_tasks()快照监控运行时状态。

python 异步程序的可观测性设计

如果您正在开发 Python 异步程序,但难以追踪请求生命周期、识别协程阻塞点或定位超时根源,则可能是由于缺乏系统化的可观测性支撑。以下是实现 Python 异步程序可观测性设计的步骤:

一、集成异步友好的指标采集

同步指标库(如标准 prometheus_client)在异步环境中可能引发事件循环阻塞或线程竞争,需选用原生支持 asyncio 的指标收集机制,确保度量上报不干扰协程调度。

1、安装异步兼容的 Prometheus 客户端:pip install prometheus-async

2、在 aiohttp 或 FastAPI 应用启动时注册异步中间件:from prometheus_async.aio.web import metrics

立即学习Python免费学习笔记(深入)”;

3、为每个异步路由添加计时器装饰器,使用 @timeit 包裹协程函数,自动记录响应延迟分布。

二、注入上下文感知的日志结构化

默认的 logging 模块无法跨 await 边界传递请求上下文,导致日志条目丢失 trace_id 或用户标识,需借助 contextvars 实现无侵入式上下文传播。

1、定义全局 ContextVar 实例:request_id = ContextVar('request_id', default=None)

2、在请求入口(如 ASGI middleware)中调用 request_id.set(generate_uuid())

3、配置 json 格式化器,在每条日志中自动注入 request_id.get() 值,避免手动传参。

三、启用协程级分布式追踪

传统 tracing SDK 基于线程局部存储(thread-local),在 asyncio 中无法正确关联跨 await 的 span,必须使用支持 contextvars 的 tracer 实现 span 上下文延续。

ShopWind网店系统
ShopWind网店系统

ShopWind网店系统是国内最专业的网店程序之一,采用ASP语言设计开发,速度快、性能好、安全性高。ShopWind网店购物系统提供性化的后台管理界面,标准的网上商店管理模式和强大的网店软件后台管理功能。ShopWind网店系统提供了灵活强大的模板机制,内置多套免费精美模板,同时可在后台任意更换,让您即刻快速建立不同的网店外观。同时您可以对网模板自定义设计,建立个性化网店形象。ShopWind网

下载

1、选用 opentelemetry-instrumentation-aiohttpopentelemetry-instrumentation-fastapi 插件。

2、初始化 tracer provider 时启用 contextvars 支持:TracerProvider().add_span_processor(...)

3、对高耗时异步调用(如 httpx.AsyncClient.request)添加手动 span 包裹,标注 span.set_attribute("async.operation", "http_call")

四、捕获未处理的协程异常与取消信号

asyncio.CancelledError 和未 await 的 Task 异常容易静默丢失,需在事件循环级别设置异常钩子,确保所有异常路径均被日志和监控捕获。

1、重写事件循环的 set_exception_handler 方法,将异常转发至 central logger。

2、在应用启动时调用 asyncio.create_task() 并显式保存 task 引用,防止被垃圾回收。

3、对每个长期运行的后台任务添加 finally 块,记录 task.cancelled() or task.exception() 状态。

五、暴露实时协程状态快照

无法直观了解当前运行中的 Task 数量、阻塞位置及等待对象类型,需通过 asyncio 内置 API 提供可查询的运行时视图。

1、定义 HTTP 端点返回 asyncio.all_tasks() 的序列化结果,过滤出非守护任务。

2、提取每个 task 的 get_coro().__name__get_stack() 前三帧,识别潜在阻塞点。

3、统计处于 WAITING 状态的任务数量,并按 wait_forgathersleep 分类聚合。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

392

2023.08.11

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

246

2023.10.07

什么是中间件
什么是中间件

中间件是一种软件组件,充当不兼容组件之间的桥梁,提供额外服务,例如集成异构系统、提供常用服务、提高应用程序性能,以及简化应用程序开发。想了解更多中间件的相关内容,可以阅读本专题下面的文章。

180

2024.05.11

Golang 中间件开发与微服务架构
Golang 中间件开发与微服务架构

本专题系统讲解 Golang 在微服务架构中的中间件开发,包括日志处理、限流与熔断、认证与授权、服务监控、API 网关设计等常见中间件功能的实现。通过实战项目,帮助开发者理解如何使用 Go 编写高效、可扩展的中间件组件,并在微服务环境中进行灵活部署与管理。

222

2025.12.18

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

442

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

544

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

322

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

81

2025.09.10

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

283

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号