0

0

Python httpx.AsyncClient 的生产最佳实践

舞夢輝影

舞夢輝影

发布时间:2026-02-24 11:37:50

|

585人浏览过

|

来源于php中文网

原创

asyncclient 必须显式关闭,否则连接泄漏;应使用 async with 或在 lifespan 中调用 aclose();timeout 需分阶段设置;http/2 需手动启用并确认全链路兼容;勿与 requests 混用 session;dns 缓存需主动管理。

python httpx.asyncclient 的生产最佳实践

AsyncClient 必须显式关闭,否则连接泄漏

异步客户端不自动回收连接池,httpx.AsyncClient 实例用完不关,会持续占用 socket 和 DNS 缓存,最终触发 ConnectionRefusedErrorTimeoutError。常见于 FastAPI 路由里直接 new 一个 client 并返回——没 await client.aclose(),下次请求就可能卡住。

  • 必须用 async with httpx.AsyncClient() as client: 包裹,这是最安全的写法
  • 若需复用 client(如全局单例),务必在应用退出时调用 await client.aclose(),比如在 FastAPI 的 lifespan 里注册 shutdown 事件
  • 别在类的 __init__ 里直接创建 client,除非你明确控制其生命周期;更别把它塞进普通函数局部变量里还指望它自己清理

timeout 设置不当导致协程卡死或误判失败

默认 timeout 是 5 秒,但这个值对生产环境几乎总是太短或太模糊。不设 timeout 参数,实际走的是 httpx.Timeout(5.0),它只控制单次读/写,不控制整个请求耗时,容易出现“看起来没超时,但实际卡在 DNS 或 TLS 握手”。

  • 显式传入 timeout=httpx.Timeout(connect=10.0, read=30.0, write=10.0, pool=5.0),把各阶段拆开控制
  • 如果调用内部服务(如 Kubernetes 集群内网),可适当调高 connect(避免因 service mesh 初始化延迟被误杀)
  • 别用 timeout=None,这会让协程彻底挂起,无法被 asyncio.cancel() 中断

HTTP/2 支持需要手动启用且有兼容陷阱

httpx 默认用 HTTP/1.1,即使服务器支持 HTTP/2,也不会自动升版。想用 HTTP/2 得主动开开关,但开了之后,有些老中间件(比如某些版本的 Envoy、Nginx 1.19 之前)会直接 reset 连接,报错 RemoteProtocolError: malformed HTTP/2 message

letterdrop
letterdrop

B2B内容营销自动化平台,从创意到产生潜在客户的内容的最佳实践和工具。

下载
  • 启用方式是 httpx.AsyncClient(http2=True),但仅当确认上下游全链路支持 HTTP/2 时才开
  • 开启后必须配 limits:HTTP/2 复用连接更强,但单连接并发上限受服务端限制,建议加 limits=httpx.Limits(max_connections=100, max_keepalive_connections=20)
  • 调试时加 httpx.HTTPTransport(verify=False, http2=True, retries=0) 可绕过 TLS 验证和重试干扰,快速定位是否是协议层问题

与 requests 混用时的 session 复用误区

有人想把 requests.Sessionhttpx.AsyncClient 当成等价物混用,比如缓存 token 后用 requests 发同步请求、用 httpx 发异步请求——这会导致 cookie、auth header、proxy 等状态完全不共享,甚至同一域名下 TCP 连接池也互不感知。

立即学习Python免费学习笔记(深入)”;

  • 不要跨库复用认证逻辑:token 获取后,统一用 headers={"Authorization": f"Bearer {token}"} 显式传给每个 client.get()
  • 代理配置要分别设置:proxies={"https://": "http://127.0.0.1:8080"} 对 httpx 有效,对 requests 无效;反之亦然
  • 如果必须共用底层连接(极少见),改用 httpx.AsyncClient(transport=httpx.AsyncHTTPTransport(...)) 自定义 transport,而不是试图桥接 requests

最常被忽略的其实是 DNS 缓存:httpx 默认复用 anyio 的 resolver,不刷新 TTL,长时间运行的服务可能连到已下线的 IP。真要稳,得自己套一层带 TTL 的 DNS cache,或者定期重建 client。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

240

2023.07.27

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

518

2023.08.04

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

567

2023.08.04

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

243

2024.02.23

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

584

2024.07.09

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

3606

2024.08.07

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

51

2026.01.13

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

67

2026.01.13

pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法
pixiv网页版官网登录与阅读指南_pixiv官网直达入口与在线访问方法

本专题系统整理pixiv网页版官网入口及登录访问方式,涵盖官网登录页面直达路径、在线阅读入口及快速进入方法说明,帮助用户高效找到pixiv官方网站,实现便捷、安全的网页端浏览与账号登录体验。

1228

2026.02.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.4万人学习

Django 教程
Django 教程

共28课时 | 4.5万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号