当前位置:首页 > 文章列表 > Golang > Go教程 > Go zip.File.OpenRaw 怎么读取原始压缩数据

Go zip.File.OpenRaw 怎么读取原始压缩数据

来源:17golang原创 2026-10-06 00:43:12 0浏览 收藏

zip.File.OpenRaw 用来读取 ZIP 条目未经解压的原始数据。它返回 io.Reader,读出的字节仍按该条目的 Method 编码:zip.Deflate 条目得到的是原始 DEFLATE 数据,zip.Store 条目因为本来不压缩,原始字节才与普通文件内容相同。最直接的写法是调用 OpenRaw 后用 io.Copy 流式写到目标,并用 CompressedSize64 核对读取长度。

官方文档:https://pkg.go.dev/archive/zip

我为什么会需要原始压缩数据

我第一次用到 OpenRaw,不是为了“更快解压”,而是要把一个大 ZIP 中的部分条目转存到内容缓存:缓存需要保存压缩后的载荷,后续再按原压缩方式装回新的 ZIP。如果用普通的 File.Open,数据会先解压;写进新 ZIP 时又要重新压缩,既增加 CPU 消耗,也无法保留原来的压缩字节。

这类场景的共同点是:目标对象就是压缩数据本身,例如计算压缩载荷的哈希、保存原始 DEFLATE 流、分析压缩大小,或者在不改内容的前提下重组 ZIP。若只是读取 JSON、图片或文本的真实内容,仍应优先使用 File.Open。

OpenRaw 返回的到底是什么

官方文档对 OpenRaw 的定义很简洁:返回一个可访问条目内容、但不做解压的 io.Reader。这里的“内容”指 ZIP 条目的数据区载荷,不包括本地文件头、数据描述符和中央目录。返回值也只是 io.Reader,调用方不需要关闭它;真正持有底层 ZIP 文件的是 zip.ReadCloser,它仍要在用完后关闭。

zip File 元数据 OpenRaw 与原始压缩字节的静态组成关系
图1:结构图,OpenRaw 暴露的是条目数据区中的原始压缩字节,不包含透明解压。

FileHeader.Method 告诉你数据采用哪种压缩方法,CompressedSize64 给出压缩后长度,UncompressedSize64 则是解压后的长度。处理 ZIP64 时应使用这两个 64 位字段,不要依赖已经标为废弃的 32 位大小字段。

最小写法:把一个条目的原始字节流式写出

下面的函数按条目名查找文件,再把原始压缩字节写入指定 io.Writer。它不把整段数据读入内存,适合大条目。为了避免把目录项当普通文件处理,示例会跳过名称以斜杠结尾的目录。

package rawzip

import (
	"archive/zip"
	"fmt"
	"io"
	"strings"
)

func CopyRawEntry(zr *zip.Reader, name string, dst io.Writer) error {
	for _, f := range zr.File {
		if f.Name != name || strings.HasSuffix(f.Name, "/") {
			continue // 只处理目标文件条目,跳过目录
		}

		raw, err := f.OpenRaw()
		if err != nil {
			return fmt.Errorf("打开原始压缩数据 %q: %w", name, err)
		}

		n, err := io.Copy(dst, raw) // 流式复制,避免一次性分配大缓冲区
		if err != nil {
			return fmt.Errorf("复制原始压缩数据 %q: %w", name, err)
		}
		if uint64(n) != f.CompressedSize64 {
			return fmt.Errorf("压缩长度不符:读取=%d,头部=%d", n, f.CompressedSize64)
		}

		return nil
	}

	return fmt.Errorf("ZIP 中没有条目 %q", name)
}

长度核对能发现截断读取或错误的上游包装,但它不等于内容完整性校验。OpenRaw 不解压,也不会像 File.Open 的读取路径那样透明验证解压内容的校验和。如果业务必须确认条目内容有效,应使用 Open 读到 EOF,或在理解格式的前提下自行完成解压与 CRC 校验。

Store 与 Deflate 的差异

最容易误判的地方,是把 OpenRaw 的返回值当成“文件原文”。是否相同取决于压缩方法。

MethodOpenRaw 得到什么可否直接当普通文件读取
zip.Store未压缩的条目字节通常可以,因为保存时没有压缩
zip.Deflate原始 DEFLATE 数据流不可以,需要按 DEFLATE 解压
自定义方法该方法编码后的原始载荷取决于对应解压器

尤其要注意:ZIP 中的 Deflate 条目通常是原始 DEFLATE 流,不是完整的 gzip 文件,也不是带 zlib 头尾的通用流。若你的目标只是获取解压后的内容,不要自己猜包装格式,直接使用 f.Open() 最稳妥。

四种方案怎么选

我后来把选择规则压缩成一句话:先确定最终需要的对象,再选接口。需要普通文件内容就用 Open;需要压缩载荷就用 OpenRaw;要把整个条目原样放进另一个 ZIP,优先用 Writer.Copy;只有在必须用底层 ReaderAt 定位数据区时才考虑 DataOffset。

Open OpenRaw Writer Copy 与 DataOffset 的职责边界静态关系
图2:说明图,四个 API 面向的结果对象和职责边界不同。
目标推荐 API是否解压校验与注意点
读取文件真实内容File.Open是透明解压,适合绝大多数调用方
读取压缩载荷File.OpenRaw否调用方理解 Method 与长度,不自动验证内容
原样复制条目到新 ZIPWriter.Copy否直接绕过解压、压缩和验证
定位底层数据区File.DataOffset否还需自行管理底层 ReaderAt 与范围

重组 ZIP:优先使用 Writer.Copy

如果目的只是把源 ZIP 的条目复制到目标 ZIP,Writer.Copy 比手动 OpenRaw + CreateRaw 更直接。官方文档明确说明,它会复制条目的原始形态,绕过解压、重新压缩和验证。

func CopySelected(srcPath, dstPath string, keep map[string]bool) (err error) {
	src, err := zip.OpenReader(srcPath)
	if err != nil {
		return fmt.Errorf("打开源 ZIP: %w", err)
	}
	defer src.Close() // 释放源文件句柄

	dst, err := os.Create(dstPath)
	if err != nil {
		return fmt.Errorf("创建目标 ZIP: %w", err)
	}
	defer func() {
		if closeErr := dst.Close(); err == nil {
			err = closeErr // 保留关闭目标文件时的错误
		}
	}()

	zw := zip.NewWriter(dst)
	defer func() {
		if closeErr := zw.Close(); err == nil {
			err = closeErr // 写入中央目录后才算完整 ZIP
		}
	}()

	for _, f := range src.File {
		if !keep[f.Name] {
			continue
		}
		if err := zw.Copy(f); err != nil {
			return fmt.Errorf("复制条目 %q: %w", f.Name, err)
		}
	}

	return nil
}

Writer.Copy 的代价同样来自“原样”:它不会替你重新验证内容。如果源 ZIP 不可信,而业务要求验证每个条目,应先用 Open 完整读取并验证,再按目标策略重新写入。省掉解压和重压缩适合可信输入、归档拆分和结构重组,不适合把验证步骤悄悄省略。

什么时候手动使用 CreateRaw

当你已经拿到原始压缩流,但需要调整条目名称或可控地构造目标头部时,可以使用 CreateRaw。传给它的数据不会再次压缩,所以 FileHeader 中的 Method、CRC32、压缩前后大小必须与原始流匹配。先复制一份头部值,再修改必要字段,可以避免让目标 Writer 长期引用源对象的嵌入头部。

func CopyRawAs(zw *zip.Writer, src *zip.File, newName string) error {
	raw, err := src.OpenRaw()
	if err != nil {
		return fmt.Errorf("打开原始数据: %w", err)
	}

	header := src.FileHeader // 复制头部值,保留 Method、CRC32 和大小
	header.Name = newName    // 只修改目标条目名

	dst, err := zw.CreateRaw(&header)
	if err != nil {
		return fmt.Errorf("创建原始条目: %w", err)
	}

	n, err := io.Copy(dst, raw) // 写入已压缩字节,不会二次压缩
	if err != nil {
		return fmt.Errorf("写入原始条目: %w", err)
	}
	if uint64(n) != header.CompressedSize64 {
		return fmt.Errorf("原始数据长度不符:%d", n)
	}

	return nil
}

如果只是无修改复制,仍优先 Writer.Copy,因为它表达的意图更直接,也减少调用方手动维护头部一致性的机会。

不适用情况与安全边界

  • 要解析文本、JSON 或图片:使用 File.Open,不要把压缩字节交给普通解析器。
  • 要验证文件内容:读取解压流到 EOF,让标准库完成正常解压路径;OpenRaw 本身不替你做内容验证。
  • 输入 ZIP 不可信:复制原始形态会保留源条目的问题。必要时先验证再重写。
  • 把条目名写到磁盘:不要直接拼接 f.Name;应独立检查路径是否为本地、安全且落在目标目录内。
  • 只想复制 ZIP 条目:优先 Writer.Copy,不要先导出原始流再绕一圈。
  • 需要随机访问底层数据区:再考虑 DataOffset,并用 CompressedSize64 限定读取范围。

常见问题

OpenRaw 返回的数据需要 Close 吗?

返回类型是 io.Reader,没有单独的 Close。通过 zip.OpenReader 打开的底层 ZIP 文件仍要关闭,并且应保证在读取原始流期间它保持可用。

可以用 io.ReadAll 读取吗?

可以,但会按压缩后大小一次性占用内存。小条目调试时可用;生产代码处理未知或大条目时,优先用 io.Copy 流式写入。

为什么 OpenRaw 后的字节不能直接用 flate.NewReader 之外的 gzip.Reader?

ZIP 的 Deflate 条目保存的是原始 DEFLATE 数据,不是带 gzip 文件头和尾部的 gzip 格式。若只想要文件内容,直接调用 File.Open,避免手动匹配包装层。

OpenRaw 会返回 ZIP 本地文件头吗?

不会。它返回条目数据载荷。需要底层位置时可查看 DataOffset,但本地文件头、数据区和目录结构应按不同对象处理。

对我来说,OpenRaw 最有价值的地方不是“比 Open 更高级”,而是让压缩载荷成为一个可直接流式处理的对象。只要先明确最终要的是普通内容、原始压缩流、目标 ZIP 条目还是底层偏移,这几个 API 的选择就很清楚。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
bangumi目录怎么用?个性化推荐、条目整理与完成度说明bangumi目录怎么用?个性化推荐、条目整理与完成度说明
上一篇
bangumi目录怎么用?个性化推荐、条目整理与完成度说明
78动漫资料库图片能直接转载吗?用户投稿、评论与版权边界说明
下一篇
78动漫资料库图片能直接转载吗?用户投稿、评论与版权边界说明
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    343次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    403次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    404次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    363次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    185次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码