0

0

如何使用Golang处理网络请求中的数据压缩_Golang网络请求数据压缩与解压缩

P粉602998670

P粉602998670

发布时间:2026-02-10 14:03:00

|

561人浏览过

|

来源于php中文网

原创

Go 的 http.Client 默认支持 gzip 压缩响应,前提是请求头含 Accept-Encoding: gzip 且服务端返回 Content-Encoding: gzip;此时 Transport 自动解压,Response.Body 为明文。

如何使用golang处理网络请求中的数据压缩_golang网络请求数据压缩与解压缩

Go 的 http.Client 默认支持 gzip 压缩吗?

支持,但仅限于服务端返回 Content-Encoding: gzip 且客户端在请求头中明确声明接受时。Go 标准库的 http.Transport 默认启用了对 gzip 的自动解压——只要你在请求头里加了 Accept-Encoding: gzip,收到 gzip 响应后,Response.Body 会自动解压,你读到的就是原始明文内容。

注意:这个行为是「默认开启」的,无法关闭(除非自定义 Transport 并禁用 DisableCompression),但前提是服务端真的返回了 gzip 编码,且响应头匹配。

  • 不手动加 Accept-Encoding: gzip → 大多数服务端不会返回压缩内容
  • 手动加了但服务端没压缩 → 响应正常,无副作用
  • 服务端返回 gzip 但你没加 Accept-Encoding → 可能返回乱码或解析失败(因未触发标准库自动解压逻辑)

如何手动控制 gzip 压缩请求体(POST/PUT)?

标准 http.Client 不会自动压缩请求体,必须自己处理。常见场景是向 API 提交大量 JSON 数据,希望减少带宽占用。

做法是:用 gzip.Writer 包裹原始数据,设置请求头 Content-Encoding: gzip,并确保服务端能识别和解压。

立即学习go语言免费学习笔记(深入)”;

Dbsite企业网站管理系统1.5.0
Dbsite企业网站管理系统1.5.0

Dbsite企业网站管理系统V1.5.0 秉承"大道至简 邦达天下"的设计理念,以灵巧、简单的架构模式构建本管理系统。可根据需求可配置多种类型数据库(当前压缩包支持Access).系统是对多年企业网站设计经验的总结。特别适合于中小型企业网站建设使用。压缩包内包含通用企业网站模板一套,可以用来了解系统标签和设计网站使用。QQ技术交流群:115197646 系统特点:1.数据与页

下载
var buf bytes.Buffer
gz := gzip.NewWriter(&buf)
json.NewEncoder(gz).Encode(data)
gz.Close() // 必须调用,否则数据可能未刷新

req, _ := http.NewRequest("POST", url, &buf)
req.Header.Set("Content-Encoding", "gzip")
req.Header.Set("Content-Type", "application/json")
  • 忘记调用 gz.Close() → 请求体为空或截断
  • 设置了 Content-Encoding: gzip 但服务端不支持 → 返回 415 或 500
  • 压缩后没重置 Content-Length → 多数情况 Go 会自动计算,但若用 bytes.Reader 等需注意底层长度是否准确

遇到 gzip: invalid header 错误怎么办?

这个错误几乎都发生在你试图手动解压响应体时——比如绕过了标准库自动解压,直接读 Response.Body 并用 gzip.NewReader 解压,但响应其实没压缩,或者被自动解压过一次了。

  • 检查响应头:resp.Header.Get("Content-Encoding") 是否真为 gzip
  • 确认没重复解压:如果没设 DisableCompression: trueResponse.Body 已是解压后的内容,再套 gzip.NewReader 必然报错
  • 调试时建议先打印原始响应头和前 32 字节:io.CopyN(ioutil.Discard, resp.Body, 32)(注意:读过之后 body 就不可再读)

需要支持 zstd、brotli 等非标准压缩算法怎么办?

Go 标准库只内置支持 gzipflate(deflate),zstdbrotlisnappy 都需第三方库,且必须手动集成编解码逻辑。

zstd 为例(使用 github.com/klauspost/compress/zstd):

import "github.com/klauspost/compress/zstd"

// 请求体压缩
encoder, _ := zstd.NewWriter(nil)
compressed := encoder.EncodeAll(data, nil)

req, _ := http.NewRequest("POST", url, bytes.NewReader(compressed))
req.Header.Set("Content-Encoding", "zstd")
  • 服务端必须明确支持该编码,且双方压缩参数(如字典、级别)要一致
  • 不能依赖标准库自动处理,所有压缩/解压逻辑都要显式写,包括错误处理和内存复用
  • 注意:HTTP/2 虽支持多种编码协商,但实际兼容性取决于服务端实现,别假设浏览器或 nginx 一定支持 zstd

真正容易被忽略的是:压缩收益和 CPU 开销的平衡。小数据(

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

185

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

233

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

345

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

211

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

401

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

302

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

196

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

742

2025.06.17

包子漫画网页版入口与全集阅读指南_正版免费漫画快速访问方法
包子漫画网页版入口与全集阅读指南_正版免费漫画快速访问方法

本专题汇总了包子漫画官网和网页版入口,提供最新章节抢先看方法、正版免费阅读指南,以及稳定访问方式,帮助用户快速直达包子漫画页面,无广告畅享全集漫画内容。

13

2026.02.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 4.9万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号