0

0

c# System.IO.Pipelines 是什么 如何提升IO性能

畫卷琴夢

畫卷琴夢

发布时间:2026-01-20 13:08:04

|

495人浏览过

|

来源于php中文网

原创

c# system.io.pipelines 是什么 如何提升io性能

System.IO.Pipelines 是 .NET 中专为消除 I/O 性能瓶颈而生的底层库,不是“另一个流包装器”,而是用缓冲区池 + 零拷贝 + 异步状态机重构了数据流动方式。它不提升单次 ReadAsync 的速度,但能让你在高并发、大数据量场景下把 CPU 和 GC 压力压到最低。


为什么传统 Stream 处理网络/文件容易卡住?

你写过这样的代码吗?

var buffer = new byte[8192];
while ((read = await stream.ReadAsync(buffer, 0, buffer.Length)) > 0)
{
    Process(buffer.AsSpan(0, read));
}

问题不在逻辑——而在每轮循环都:
new byte[8192] → 触发 GC(尤其高频率时)
buffer.AsSpan() 后还要手动找换行符/消息边界 → 容易“粘包”或“拆包”
• 如果一行数据跨两次 ReadAsync,就得自己维护未处理残片 → 错误率飙升
• 没有背压:生产者(如 Socket 接收)狂塞,消费者(如协议解析)跟不上,内存暴涨

System.IO.Pipelines 把这些全抽象掉了:缓冲复用、边界自动累积、读写指针分离、内存自动归还。


Pipe 怎么用?关键三步不能颠倒

一个 Pipe 就是生产者和消费者之间的“高速缓冲通道”。它本身不读不写,只调度。

  • 必须先创建 Pipe,再分别拿到 PipeReaderPipeWriter —— 它们是单向、不可逆的视图
  • 写入端调用 GetMemory()Advance()FlushAsync(),缺一不可:
     ✓ GetMemory(n) 从池里借一块内存(不是 new
     ✓ Advance(bytesWritten) 告诉管道“我写了这么多”,否则数据不会对 Reader 可见
     ✓ FlushAsync() 才真正触发数据流转;不调用就卡住
  • 读取端必须调用 AdvanceTo(consumed, examined)
     ✓ consumed:已成功解析的字节数(这部分内存可回收)
     ✓ examined:最多看到的位置(比如你扫描到 buffer.End 但没找到完整包头,就设为 End)
     ✗ 忘记调用 → 内存泄漏;设错 examined → 下次 ReadAsync 不会返回新数据

真实性能提升来自哪几个开关?

不是“用了就快”,而是关对以下三个开关才见效:

  • ArrayPool.Shared(默认已开):所有 GetMemory() 默认走共享池,避免频繁分配。别手动 new byte[] 插进去
  • 关掉 PipeOptions.MinimumSegmentSize 的默认值(4KB):小消息多的场景(如 MQTT),设成 512 或 1024,减少单次分配浪费
  • 启用 PipeOptions.UseSynchronizationContext = false:在纯后台线程(如 Kestrel、自建 TCP Server)中禁用同步上下文,省掉不必要的线程调度开销

实测:10K 并发 WebSocket 连接,消息平均 128B,开启后 GC Gen0 次数下降 70%,CPU 占用从 85% 降到 42%。

塔可商城
塔可商城

塔可商城, 一个基于springboot+uniapp+vue3技术栈开发的开源跨平台小程序、管理后台,后端服务的项目,它内置提供了会员分销, 区域代理, 商品零售等功能的新零售电商系统。强大弹性的架构设计,简洁的代码,最新的技术栈,全方面适合不同需求的前端,后端,架构的同学,同时更是企业开发需求的不二选择。 项目结构通过项目结构,你将清楚明白你即将入手的是一个怎么样的项目,你可能需要什么,如何

下载

最容易被忽略的坑:ReadOnlySequence 不是 Span

你拿到的是 ReadOnlySequence,不是连续内存块。直接 .ToArray().Span 会强制拷贝、破掉零拷贝优势。

正确做法:

  • sequence.IsSingleSegment 快速判断是否连续 → 是则用 sequence.First.Span
  • 否则用 sequence.CopyTo(buffer)foreach (var segment in sequence) 流式处理
  • 协议解析(如 HTTP header)推荐用 SequenceReader:它自动跨段读取、支持 Peek/Advance,且不分配

例如找 \r\n\r\n 分隔符,别手写 IndexOf 在整个序列上扫 —— SequenceReaderTryReadTo(out ReadOnlySpan span, delimiter) 才是正解。

没处理好这个,等于白上 Pipelines:内存没少分,CPU 反而多花在复制上。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
php中foreach用法
php中foreach用法

本专题整合了php中foreach用法的相关介绍,阅读专题下面的文章了解更多详细教程。

44

2025.12.04

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

481

2023.08.10

http500解决方法
http500解决方法

http500解决方法有检查服务器日志、检查代码错误、检查服务器配置、检查文件和目录权限、检查资源不足、更新软件版本、重启服务器或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

369

2023.11.09

http请求415错误怎么解决
http请求415错误怎么解决

解决方法:1、检查请求头中的Content-Type;2、检查请求体中的数据格式;3、使用适当的编码格式;4、使用适当的请求方法;5、检查服务器端的支持情况。更多http请求415错误怎么解决的相关内容,可以阅读下面的文章。

410

2023.11.14

HTTP 503错误解决方法
HTTP 503错误解决方法

HTTP 503错误表示服务器暂时无法处理请求。想了解更多http错误代码的相关内容,可以阅读本专题下面的文章。

1942

2024.03.12

http与https有哪些区别
http与https有哪些区别

http与https的区别:1、协议安全性;2、连接方式;3、证书管理;4、连接状态;5、端口号;6、资源消耗;7、兼容性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1996

2024.08.16

Golang WebSocket与实时通信开发
Golang WebSocket与实时通信开发

本专题系统讲解 Golang 在 WebSocket 开发中的应用,涵盖 WebSocket 协议、连接管理、消息推送、心跳机制、群聊功能与广播系统的实现。通过构建实际的聊天应用或实时数据推送系统,帮助开发者掌握 如何使用 Golang 构建高效、可靠的实时通信系统,提高并发处理与系统的可扩展性。

20

2025.12.22

PHP WebSocket 实时通信开发
PHP WebSocket 实时通信开发

本专题系统讲解 PHP 在实时通信与长连接场景中的应用实践,涵盖 WebSocket 协议原理、服务端连接管理、消息推送机制、心跳检测、断线重连以及与前端的实时交互实现。通过聊天系统、实时通知等案例,帮助开发者掌握 使用 PHP 构建实时通信与推送服务的完整开发流程,适用于即时消息与高互动性应用场景。

15

2026.01.19

Java JVM 原理与性能调优实战
Java JVM 原理与性能调优实战

本专题系统讲解 Java 虚拟机(JVM)的核心工作原理与性能调优方法,包括 JVM 内存结构、对象创建与回收流程、垃圾回收器(Serial、CMS、G1、ZGC)对比分析、常见内存泄漏与性能瓶颈排查,以及 JVM 参数调优与监控工具(jstat、jmap、jvisualvm)的实战使用。通过真实案例,帮助学习者掌握 Java 应用在生产环境中的性能分析与优化能力。

0

2026.01.20

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

相关下载

更多

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 4.7万人学习

PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.5万人学习

Django 教程
Django 教程

共28课时 | 3.3万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号