0

0

如何使用Golang compress/flate进行压缩_处理二进制数据

P粉602998670

P粉602998670

发布时间:2026-01-05 11:57:08

|

527人浏览过

|

来源于php中文网

原创

compress/flate 仅实现 RFC 1951 DEFLATE 算法,无 gzip/zlib 封装;压缩需调用 Close() 刷新,解压输入必须是纯 DEFLATE 流,误用于 .gz 文件会报 invalid header。

如何使用golang compress/flate进行压缩_处理二进制数据

Go 标准库 compress/flate 提供了对 DEFLATE 算法 的底层实现(RFC 1951),它不包含 zlib 或 gzip 头尾,仅处理纯压缩数据流。适用于需要与底层协议(如 HTTP 响应体、自定义二进制协议)对接,或需精细控制压缩参数的场景。

理解 flate 的定位:不是直接替代 gzip

compress/flate 不读写 gzip/zlib 封装格式(即没有魔数、CRC、长度字段等)。如果你拿到的是 .gz 文件或带 gzip header 的 HTTP body,应使用 compress/gzip;若你只有一段原始字节,想用 DEFLATE 压缩/解压,且后续要手动拼接头尾或嵌入到其他协议中,才用 flate

常见误用:试图用 flate.NewReader 解压一个 .gz 文件 → 报错 invalid header,因为缺少 gzip header。

压缩二进制数据:创建 flate.Writer

使用 flate.NewWriter 包裹一个 io.Writer,然后写入原始字节。关键点:

立即学习go语言免费学习笔记(深入)”;

  • 压缩级别通过 flate.BestSpeedflate.BestCompressionflate.DefaultCompression 或 0–9 的整数指定
  • 必须调用 w.Close() 才能刷新并写出最终压缩块(否则部分数据可能滞留在缓冲区)
  • 输出是纯 DEFLATE 流,无额外封装

示例:

Image Creator
Image Creator

ImageCreator是Photoshop的免费AI插件,赋予艺术家强大的功能,如TXT2IMG、IMG2IMG、Fill和ControlNet。

下载
data := []byte("hello world, this is binary data")
var buf bytes.Buffer
w, _ := flate.NewWriter(&buf, flate.BestCompression)
w.Write(data)
w.Close() // 必须调用!
compressed := buf.Bytes() // []byte,纯 DEFLATE 数据

解压二进制数据:使用 flate.NewReader

flate.NewReader 接收一个 io.Reader,返回一个可读取原始数据的接口。注意:

  • 输入必须是合法的 DEFLATE 流(不能是 gzip/zlib)
  • 不需要显式 Close,但建议在用完后调用 r.(io.Closer).Close() 释放资源(尤其在长期运行服务中)
  • 如果输入损坏或非 DEFLATE 格式,Read 会返回错误(如 unexpected EOFinvalid literal/length code

示例:

r := flate.NewReader(bytes.NewReader(compressed))
defer func() { _ = r.(io.Closer).Close() }()
var dst bytes.Buffer
io.Copy(&dst, r) // 自动解压并写入
original := dst.Bytes() // 应等于初始 data

进阶:复用 Writer/Reader 避免频繁分配

在高频压缩/解压场景(如 HTTP 中间件),可复用 flate.Writerflate.Reader 实例以减少内存分配:

  • Writer 支持 w.Reset(io.Writer) 重置目标;也可传入预分配的 bytes.Buffer 并复用其底层数组
  • Reader 没有 Reset 方法,但可重复调用 flate.NewReader —— 它内部已做轻量初始化,开销可控;若极致优化,可结合 sync.Pool 缓存 Reader 实例

小提示:DEFLATE 压缩效果高度依赖数据特征。对已经压缩过的数据(如 JPEG、MP4)、加密随机数据,flate 基本无法进一步压缩,甚至可能略微膨胀。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

177

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

225

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

336

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

207

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

388

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

194

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

189

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

191

2025.06.17

mc.js网页版入口地址大全
mc.js网页版入口地址大全

本专题整合了mc.js网页版入口地址大全以及mc.js1.8.8版本汇总,阅读专题下面的文章了解更多详细内容。

34

2026.01.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 3.4万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号