当前位置:首页 > 文章列表 > Golang > Go教程 > Golang compress包使用教程与实例解析

Golang compress包使用教程与实例解析

2026-05-21 18:25:15 0浏览 收藏
Go语言中压缩与解压看似简单,实则暗藏诸多易被忽视的关键细节:gzip仅支持单文件压缩且必须显式调用Close()才能生成合法文件;多文件或目录打包需搭配tar或zip,而zip要求路径标准化为正斜杠、手动处理递归遍历并严格校验防路径遍历攻击;tar.gz则依赖精准的嵌套顺序——先gzip解压再tar解析,顺序颠倒即读取失败;更关键的是,资源释放时机、缓冲区刷新、安全过滤和结构校验等“非功能性”环节一旦疏忽,轻则压缩包损坏,重则引发系统级安全风险——真正决定成败的,往往不是语法,而是这些决定可靠性的工程细节。

Golang如何压缩和解压文件_Golang compress包应用案例

Go 标准库的 compress/gzip 只能压缩单个文件,不能打包目录;要压缩多个文件或保留路径结构,必须搭配 archive/tar —— 这是绝大多数人一开始踩坑的根源。

gzip 压缩单个文件:Close() 必须显式调用,否则生成的 .gz 文件损坏

很多人写完 io.Copy(gzWriter, src) 就以为完事了,结果生成的 .gz 文件用 gunzip -t 检查报 unexpected end of file。这是因为 gzip.Writer 内部有缓冲,且必须写入 CRC 和 ISIZE 尾部数据,而这些只在 Close() 时触发。

  • defer gzWriter.Close() 是安全写法,但要注意它在函数 return 后才执行 —— 若中间 panic 或提前 return,可能漏掉
  • 不要用 os.Open 直接读 .gz 文件内容,那只是二进制流;解压必须用 gzip.NewReader()
  • 压缩级别可选:gzip.NoCompression(快)、gzip.BestSpeed(推荐日志)、gzip.DefaultCompression(通用)

zip 打包多个文件:路径必须转为正斜杠,且 zw.Close() 不可省略

archive/zip 支持多文件+目录打包,但不自动递归遍历 —— 你得自己用 filepath.Walk 处理。更关键的是,ZIP 规范要求内部路径用 / 分隔,Windows 上的 \ 会导致某些解压工具(如 macOS 归档实用工具)识别失败。

  • 对每个文件调用 zip.FileInfoHeader(info) 后,务必设置 header.Method = zip.Deflate,否则默认不压缩
  • 写入前用 filepath.ToSlash(relPath) 标准化路径,比如 "sub\file.txt" → "sub/file.txt"
  • zw.Close() 必须调用,它会写入 ZIP 中央目录区,缺了就不是合法 ZIP 文件

解压 ZIP 时最常被忽略的安全校验:防 ../ 路径遍历

直接把 file.Name 拼到目标目录下?危险。攻击者构造的 ZIP 里可能含 "../../etc/passwd" 这类路径,一解压就覆盖系统文件。

  • 先做 cleanPath := filepath.Clean(file.Name)
  • 再检查:if cleanPath != file.Name || strings.HasPrefix(cleanPath, "..") → 跳过该条目
  • 创建文件前,先 os.MkdirAll(filepath.Dir(dstPath), 0755) 确保父目录存在
  • 目录条目需显式判断:if file.IsDir() { os.MkdirAll(...); continue },别试图往目录里 io.Copy

tar.gz 的正确打开方式:两层 Reader/Writer 嵌套顺序不能反

tar 不压缩,gzip 不打包 —— 它们职责分明。tar.gz 是先 tar 打包成流,再套 gzip 压缩。解压时顺序反过来:先 gzip.NewReader,再传给 tar.NewReader。

  • 错误做法:tar.NewReader(gzipFile) —— gzipFile 是未解压的原始句柄,tar.NewReader 会直接解析乱码
  • 正确嵌套:gr := gzip.NewReader(f); tr := tar.NewReader(gr)
  • 读每个文件时,必须严格按 hdr.Size 读取:io.CopyN(outFile, tr, hdr.Size),不能读到 io.EOF,否则下一个 tr.Next() 会错位

真正麻烦的从来不是“怎么写”,而是“怎么不出错”:路径标准化、资源关闭时机、安全过滤、嵌套层级顺序 —— 这些细节没处理好,压缩包要么打不开,要么悄悄删掉你家 /etc。

理论要掌握,实操不能落!以上关于《Golang compress包使用教程与实例解析》的详细介绍,大家都掌握了吧!如果想要继续提升自己的能力,那么就来关注golang学习网公众号吧!

豆包AI如何解析小说主题与人物关系豆包AI如何解析小说主题与人物关系
上一篇
豆包AI如何解析小说主题与人物关系
飞飞漫画免费入口推荐
下一篇
飞飞漫画免费入口推荐
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    421次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    500次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    510次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    456次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    285次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码