0

0

c# 如何用 Polly 的 CachePolicy 包装高并发请求

星降

星降

发布时间:2026-03-12 10:47:26

|

270人浏览过

|

来源于php中文网

原创

cachepolicy 本身不提供缓存存储,仅作为策略壳子,必须配合 memorycache 或 redis 等实际缓存后端使用;高并发下需确保线程安全、键生成稳定、异步调用正确、异常响应可控。

c# 如何用 polly 的 cachepolicy 包装高并发请求

CachePolicy 必须配合内存或分布式缓存实例使用

Polly 的 CachePolicy 本身不提供缓存存储,它只是策略壳子,真正存取逻辑由你传入的 ICacheProvider(如 MemoryCacheProvider 或自定义的 Redis 实现)承担。高并发下直接用 MemoryCache 是可行的,但要注意:.NET 6+ 的 MemoryCache 线程安全,而旧版需确保传入的是线程安全封装。

常见错误是只注册了 CachePolicy 却没配缓存后端,结果每次请求都穿透——日志里看不到缓存命中,OnCacheGet/OnCachePut 也不触发。

  • 必须显式构造 MemoryCache 实例并注入到 MemoryCacheProvider
  • 避免在每次策略创建时 new 一个新 MemoryCache,否则缓存完全不共享
  • 若用 Redis,需自行实现 ICacheProvider,且注意序列化/反序列化性能和 null 值处理

缓存键生成必须稳定且区分请求上下文

默认 CacheKeyGenerator 只对委托参数做简单哈希,对 HTTP 请求极易冲突——比如 GET /api/users?id=123GET /api/users?Id=123(大小写不同)可能被当成同一键;又或者未把用户 Token、Accept-Language 等上下文纳入键中,导致缓存污染。

实操建议用显式键生成器:

var cachePolicy = Policy.CacheAsync<HttpResponseMessage>(
    new MemoryCacheProvider(memoryCache),
    new CacheKeyGenerator((context, token) =>
    {
        var request = context.OperationKey as HttpRequestMessage;
        if (request == null) return Guid.NewGuid().ToString();
        
        // 确保 URL 参数顺序、大小写归一化
        var uri = new UriBuilder(request.RequestUri) { Query = SortAndNormalizeQuery(request.RequestUri.Query) };
        return $"http-{uri.ToString()}-{request.Headers.Authorization?.Parameter ?? "anon"}";
    })
);
  • OperationKey 是你调用 ExecuteAsync 时传入的上下文对象,务必在发起请求前把它设为 HttpRequestMessage
  • 避免在键中拼接原始 JSON 或未清洗的 header 值,防止控制字符或空格引发哈希不一致
  • 高并发下键生成函数不能有锁或 I/O,否则成瓶颈

异步缓存策略必须用 Policy.CacheAsync 而非 Policy.Cache

Policy.Cache 是同步策略,强行包装 HttpClient.SendAsync 这类异步方法会阻塞线程池线程,高并发时迅速耗尽线程,表现为你看到大量请求延迟飙升甚至超时,但 CPU 不高——这是典型的同步包装异步的反模式。

紫东太初
紫东太初

中科院和武汉AI研究院推出的新一代大模型

下载

正确做法只有这一种:

var cachePolicy = Policy.CacheAsync<HttpResponseMessage>(cacheProvider, ttlSeconds: 60);
  • 返回类型必须与被包装方法一致(这里是 Task<httpresponsemessage></httpresponsemessage>),否则编译失败或运行时报 InvalidCastException
  • 不要试图用 .Result.GetAwaiter().GetResult() 强转,这在 ASP.NET Core 请求上下文中大概率引发死锁
  • 若业务逻辑需要 fallback 到本地计算,需用 Policy.WrapAsync 组合 CacheAsync + CircuitBreakerAsync + RetryAsync,顺序不能颠倒

缓存失效和并发写入需靠 TTL 和原子操作兜底

CachePolicy 不支持主动清除(no RemoveAsync),所以别指望能按用户 ID 批量删缓存。高并发场景下多个线程同时发现缓存过期,会一起回源,造成“缓存雪崩”。

缓解方式有限但有效:

  • 设置合理 ttlSeconds(如 30–120 秒),避免全站缓存同时过期
  • 启用 CacheEntryOptions.SlidingExpiration(通过自定义 ICacheProvider 透传),让热点数据自动续期
  • 对关键接口,在缓存策略外加一层“逻辑锁”:用 ConcurrentDictionary<string task>></string> 持有正在加载的任务,避免重复回源(Polly 不管这事,得自己写)
  • Redis 后端时,利用其 SET key value EX 60 NX 原子语义做首次写入保护,但 Polly 默认不集成该逻辑

最易被忽略的一点:CachePolicy 对异常响应(如 500、404)默认也缓存,且不校验状态码。如果上游服务临时出错,错误响应会被多个请求共享。必须用 Policy.CacheAsync 的重载,传入 shouldRetryExceptionshouldCacheResult 委托来精确控制。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

406

2023.08.11

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

251

2023.10.07

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

455

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

546

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

334

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

82

2025.09.10

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1010

2023.08.02

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

254

2023.09.22

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

3

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 11.1万人学习

C 教程
C 教程

共75课时 | 5.4万人学习

C++教程
C++教程

共115课时 | 21.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号