0

0

C# gRPC双向流传文件 C#如何通过双向流实现交互式文件传输

畫卷琴夢

畫卷琴夢

发布时间:2026-03-13 11:57:11

|

803人浏览过

|

来源于php中文网

原创

gRPC双向流传文件需定义rpc TransferFiles(stream FileChunk) returns (stream FileStatus),双方均用stream修饰;FileChunk含bytes data、filename、is_last,FileStatus含progress、message、success;客户端须调CompleteAsync(),服务端应流式落盘并校验,避免内存溢出与超时失败。

c# grpc双向流传文件 c#如何通过双向流实现交互式文件传输

gRPC 双向流怎么定义才能传文件

双向流必须用 stream 修饰请求和响应类型,不能只流一边。常见错误是把 UploadRequest 设成单条消息、只让服务端返回 stream UploadResponse——这其实是服务器流,不是双向流,无法实时反馈进度或中断传输。

正确做法是在 .proto 里声明:

rpc TransferFiles(stream FileChunk) returns (stream FileStatus);
其中 FileChunk 包含 bytes datastring filenamebool is_last 等字段;FileStatus 包含 int32 progressstring messagebool success

  • bytes data 字段实际对应 C# 的 ReadOnlyMemory<byte>ByteString,别直接用 byte[] 做属性(序列化会出问题)
  • 别在单个 FileChunk 里塞整个文件——gRPC 默认有 4MB 消息上限,大文件必须分块,建议每块 128KB~512KB
  • 客户端写完所有 FileChunk 后,必须显式调用 await writer.CompleteAsync(),否则服务端收不到 EOF,await foreach 会一直挂起

C# 客户端怎么边发边收状态

关键不是“发完再收”,而是用同一个 AsyncDuplexStreamingCall<FileChunk, FileStatus> 实例同时读写。很多人误以为要开两个独立流,结果状态对不上、超时错乱。

典型写法是启动一个发送任务 + 一个接收任务,并用 CancellationToken 协同控制:

var call = client.TransferFiles();
_ = Task.Run(async () => {
  foreach (var chunk in chunks) {
    await call.RequestStream.WriteAsync(chunk);
    await Task.Delay(1); // 防止单次压满缓冲区
  }
  await call.RequestStream.CompleteAsync();
});
await foreach (var status in call.ResponseStream.ReadAllAsync(ct)) {
  Console.WriteLine($"[{status.Progress}%] {status.Message}");
}
  • 不要在 WriteAsync 后立刻 await ReadAsync——这不是同步 RPC,响应顺序不保证与请求一一对应
  • 如果服务端返回 status.Success == false,应主动取消 CancellationToken 并 await call.RequestStream.CompleteAsync(),避免继续发包
  • 注意 ReadAllAsync() 是扩展方法,需引用 Grpc.Net.Client 2.47+,旧版本得手动写 while (await responseStream.MoveNext())

服务端如何避免内存爆掉或丢块

最常踩的坑:把所有 FileChunk.data 全 accumulate 到一个 List<byte[]> 再拼接——上传 1GB 文件就吃掉 1.5GB 内存,还可能触发 GC 中断流。

PaperFake
PaperFake

AI写论文

下载

正确姿势是流式落盘 + 分块校验:

await foreach (var chunk in requestStream.ReadAllAsync(ct))
{
  if (chunk.IsLast)
  {
    await fileStream.FlushAsync();
    break;
  }
  await fileStream.WriteAsync(chunk.Data.Memory, ct);
}
  • FileStream 构造时加 FileOptions.Asynchronous | FileOptions.SequentialScan,提升大文件写入性能
  • chunk.DataByteString,转 Memory<byte>.Memory 属性,别用 .ToByteArray()(触发复制)
  • 服务端别在循环里 new FileStream——每个连接复用一个实例,否则 Windows 下快速创建/销毁文件句柄会耗尽
  • 如果客户端网络抖动,gRPC 会重传部分帧,但不会保证 exactly-once;业务层需靠 chunk.SequenceNumber 或哈希校验去重

为什么传一半就报 “Status(StatusCode=Internal, Detail="Error starting gRPC call")”

这个错误几乎全是服务端未捕获异常导致的,比如 FileStream 路径不可写、磁盘满、chunk.Data 为 null 时没判空就调 .Memory

更隐蔽的是超时:默认客户端和服务端都设了 100 秒超时,传大文件很容易触发。必须显式配置:

var channel = GrpcChannel.ForAddress("https://...", new GrpcChannelOptions
{
  HttpHandler = new SocketsHttpHandler { PooledConnectionLifetime = TimeSpan.FromMinutes(5) },
  DisposeHttpClient = true
});
// 调用时传 cancellation token with longer timeout
await foreach (var s in call.ResponseStream.ReadAllAsync(ct)) { ... }
  • 服务端 Kestrel 也要调大超时:options.Limits.KeepAliveTimeout = TimeSpan.FromMinutes(10)
  • 别依赖 AppContext.SetSwitch("System.Net.Http.SocketsHttpHandler.Http2UnencryptedSupport", true) 走明文 HTTP/2——生产环境必须用 TLS,否则某些代理会截断长流
  • 调试时用 grpc_cli 测试基础流通不通:grpc_cli call localhost:5001 TransferFiles @request.json,排除客户端逻辑干扰

实际跑通的关键不在“怎么写语法”,而在于两边对 chunk 边界、错误传播、超时协同的理解是否一致——少一个 CompleteAsync(),或服务端少一个 try/catch,整条流就静默失败。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

457

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

549

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

337

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

82

2025.09.10

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1031

2023.08.02

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

254

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

1089

2024.03.01

while的用法
while的用法

while的用法是“while 条件: 代码块”,条件是一个表达式,当条件为真时,执行代码块,然后再次判断条件是否为真,如果为真则继续执行代码块,直到条件为假为止。本专题为大家提供while相关的文章、下载、课程内容,供大家免费下载体验。

107

2023.09.25

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

26

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C# 教程
C# 教程

共94课时 | 11.2万人学习

C 教程
C 教程

共75课时 | 5.4万人学习

C++教程
C++教程

共115课时 | 21.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号