当前位置:首页 > 文章列表 > Golang > Go教程 > Go compress/gzip 正确关闭 Writer 写入尾部

Go compress/gzip 正确关闭 Writer 写入尾部

来源:17golang原创 2026-10-31 12:56:48 0浏览 收藏

Go 的 compress/gzip 写入器不能只调用 Write 就结束。压缩数据可能仍停留在 gzip.Writer 或其内部压缩器中,必须调用 Close,它才会把未写出的数据刷新到下层,并写入 GZIP 尾部。这里的 Close 只关闭压缩写入器,不会替你关闭文件、缓冲区或网络连接。

官方地址:https://pkg.go.dev/compress/gzip

最稳妥的顺序是:先创建底层输出,再创建 gzip.Writer,写入并检查错误,最后关闭 gzip.Writer;如果底层资源也需要关闭,让它在压缩器之后关闭。

先看清两个 Writer 的责任边界

gzip.NewWriter(w) 接收一个实现了 io.Writer 的下层对象。上层的 gzip.Writer 负责压缩格式和 GZIP 尾部,下层对象负责真正保存或发送字节。官方文档明确说明,Write 产生的压缩字节不一定会立即写入下层;Close 会刷新未写数据并写入尾部,但不会关闭下层 io.Writer。

Go gzip Writer 与底层 io.Writer 的静态责任边界结构图
图1:结构说明图,查看 gzip.Writer、压缩器、GZIP 尾部和底层 io.Writer 的责任边界;这是静态说明图,不是运行截图。

因此,下面的关闭顺序是有意义的:先让 gzip 写入器完成收尾,再关闭文件等底层资源。如果反过来关闭文件,gzip.Writer.Close 可能无法把最后的尾部写出去。

写文件时怎样正确收尾

一次性生成 gzip 文件时,可以把底层文件和压缩写入器分别注册到 defer。由于 defer 后进先出,先注册文件、后注册 gzip,执行时就会先关闭 gzip,再关闭文件:

package main

import (
    "compress/gzip"
    "fmt"
    "os"
)

func writeGZIP(path string, data []byte) (err error) {
    // 文件负责保存最终的 gzip 字节,先注册它的兜底关闭。
    file, err := os.Create(path)
    if err != nil {
        return fmt.Errorf("create gzip file: %w", err)
    }
    defer func() {
        // 文件关闭错误不能覆盖前面更重要的写入或 gzip 收尾错误。
        if closeErr := file.Close(); err == nil && closeErr != nil {
            err = fmt.Errorf("close file: %w", closeErr)
        }
    }()

    gz := gzip.NewWriter(file)
    // 后注册的 defer 先执行,保证 gzip 尾部先写进文件。
    defer func() {
        if closeErr := gz.Close(); err == nil && closeErr != nil {
            err = fmt.Errorf("close gzip writer: %w", closeErr)
        }
    }()

    // Write 只负责提交压缩输入,错误仍要立即返回给调用方。
    if _, err = gz.Write(data); err != nil {
        return fmt.Errorf("write gzip data: %w", err)
    }
    return nil
}

这个写法把 Close 的错误纳入返回值,而不是用 defer gz.Close() 静默丢弃。对普通本地文件,文件关闭错误也可能反映出落盘阶段的问题,所以示例保留了两层错误处理。

为什么只检查 Write 仍然不够

Write 成功,只能说明输入已经交给 gzip 写入器处理;最后的压缩器收尾、GZIP 校验信息和尾部写入仍发生在 Close 阶段。若下层是网络响应、限流 Writer 或会返回错误的自定义 Writer,Close 也必须检查。

func writeTo(dst io.Writer, data []byte) (err error) {
    gz := gzip.NewWriter(dst)
    // 兜底路径也要检查 Close,避免 footer 写入错误被吞掉。
    defer func() {
        if closeErr := gz.Close(); err == nil && closeErr != nil {
            err = fmt.Errorf("finish gzip stream: %w", closeErr)
        }
    }()

    // 这里的错误表示压缩输入或下层写入已经出现问题。
    if _, err = gz.Write(data); err != nil {
        return fmt.Errorf("write compressed data: %w", err)
    }
    return nil
}

如果函数同时有多个可能返回点,建议使用命名返回值,让延迟关闭函数只在前面没有错误时补充 Close 错误。已经有错误时,不要为了“同时返回两个错误”而覆盖最早的根因;需要聚合多个错误时,再显式使用项目约定的错误组合方式。

Go gzip 写入、Close 尾部与底层输出错误之间的静态关系图
图2:关系说明图,查看 Write、Close、GZIP 尾部和底层输出错误之间的静态关系;这是结构示意,不代表实际运行结果。

Flush、Close 和 Reset 分别什么时候用

  • Close 用于一个 gzip 流的最终收尾,必须在完成写入后调用。
  • Flush 用于压缩网络协议等需要尽快把暂存数据推给接收端的场景,它不等于最终关闭,也不替代最后的 Close。
  • Reset 用于复用同一个 gzip.Writer 写向新的下层目标;复用前仍要先结束上一段流,且新的目标要承担自己的关闭责任。

如果只是写一个完整文件,通常不需要主动调用 Flush。对 HTTP 流式输出,是否提前刷新要结合响应协议和延迟目标判断;刷新会增加写出次数,不能把它当成“保证数据已经永久保存”的同步落盘操作。

常见问题

只关闭文件,不关闭 gzip.Writer,会怎样?

文件可能已经存在,但最后一段压缩数据和 GZIP 尾部未完整写入,读取端就可能遇到截断或校验失败。应先关闭 gzip,再关闭文件。

gzip.Writer.Close 会关闭底层文件吗?

不会。它只完成压缩写入器自身的收尾,底层文件、缓冲区或连接由创建它们的代码负责关闭。

defer gzipWriter.Close() 能不能用?

可以作为兜底,但如果 Close 返回错误而代码不读取它,尾部写入失败就会被静默忽略。生产代码至少应把关闭错误写入命名返回值或明确记录。

小结

记住三点即可:Write 提交压缩输入,Close 完成刷新和 GZIP 尾部,底层 io.Writer 仍由调用方关闭。把这三个责任分开,文件压缩、HTTP 输出和 Writer 复用都更容易写出可维护的收尾逻辑。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go archive/tar 限制解包路径与文件大小Go archive/tar 限制解包路径与文件大小
上一篇
Go archive/tar 限制解包路径与文件大小
Go net/http 怎样读取重复响应头
下一篇
Go net/http 怎样读取重复响应头
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    809次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    799次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    890次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    862次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    687次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码