当前位置:首页 > 文章列表 > 文章 > 前端 > JavaScript CompressionStream 怎样把文本流压缩成 gzip

JavaScript CompressionStream 怎样把文本流压缩成 gzip

来源:17golang原创 2026-10-29 07:39:56 0浏览 收藏

可以。浏览器端把文本流压成 gzip,最清晰的做法是拆成两段:先用 TextEncoderStream 把字符串块转成 UTF-8 字节,再用 CompressionStream("gzip") 把字节块压缩。两者都属于流式转换,适合边产生边处理,不必先把整篇文本拼成一个超大的字符串。

最终得到的是压缩后的二进制字节流,不是可直接显示的文本。如果把它作为 HTTP 请求体发送,服务端还需要根据 Content-Encoding: gzip 解码;这个头描述的是请求体已经采用的内容编码,不是普通的响应压缩开关。

先分清文本、字节与压缩流

CompressionStream 不负责理解 JavaScript 字符串,它接收的是字节。文本输入因此需要先编码。可以把整个过程看成下面四个节点:

  • 文本块:例如日志行、JSON 片段或用户输入的增量内容。
  • UTF-8 字节:由 TextEncoderStream 产生,编码结果是 Uint8Array。
  • gzip 压缩流:由 CompressionStream("gzip") 产生。
  • 压缩字节:可以收集为 Uint8Array,再交给 Blob、文件或请求体。
JavaScript 文本流经过 TextEncoderStream 和 gzip CompressionStream 变成压缩字节的结构说明图
图1:静态结构说明图,展示文本块经过 UTF-8 编码后进入 gzip 压缩流的管道关系。

这里不要把 TextEncoderStream 和 TextDecoderStream 混用:前者是字符串到 UTF-8 字节,后者是字节到字符串。压缩发生在字节阶段。

把文本流接成 gzip 管道

如果文本来源本身就是一个 ReadableStream,可以连续调用 pipeThrough()。下面的函数接收字符串块,并返回已经压缩的 ReadableStream:

function gzipTextStream(textStream) {
  // 第一段只做 UTF-8 编码,把字符串块变成 Uint8Array。
  const utf8Stream = textStream.pipeThrough(new TextEncoderStream());

  // 第二段只做 gzip 压缩,输出仍然是二进制字节块。
  return utf8Stream.pipeThrough(new CompressionStream("gzip"));
}

这个函数没有立即读取数据。流是按需传递的:下游开始读取时,上游才会逐步产生并转换数据。压缩格式只写成 gzip 或 deflate 这类 API 支持的格式,不要把 MIME 类型或文件扩展名传给构造函数。

读取压缩结果并处理结束

为了保存或查看压缩结果,可以从返回流取得 reader,逐块收集字节。关键点是等待写端关闭后再等待读取端结束,否则只读到部分结果就开始组装 Blob。

async function compressTextChunks(chunks) {
  const source = new ReadableStream({
    start(controller) {
      // 按顺序推入文本块,结束时必须关闭源流。
      for (const chunk of chunks) controller.enqueue(chunk);
      controller.close();
    },
  });

  const compressed = gzipTextStream(source);
  const reader = compressed.getReader();
  const output = [];

  try {
    while (true) {
      const { value, done } = await reader.read();
      // done=true 表示压缩器已经把尾部字节也交给读取端。
      if (done) break;
      if (value) output.push(value);
    }
  } finally {
    // 发生异常时释放 reader 锁,避免后续无法接管该流。
    reader.releaseLock();
  }

  // Blob 会按给定顺序拼接每个 Uint8Array 压缩块。
  return new Blob(output, { type: "application/gzip" });
}

done 是读取生命周期的边界,不代表原文里出现了某个特殊字符串。只有源流被关闭、压缩器完成收尾并把最后的 gzip 数据推出后,读取端才会得到 done: true。

CompressionStream writer 关闭、reader 读到 done 和 gzip 请求体上传关系的生命周期说明图
图2:静态边界说明图,展示压缩流关闭、读取完成与上传元数据之间的关系。

上传时不要把压缩字节当普通文本

压缩结果可以作为请求体发送,但请求头要表达内容编码。下面示例直接发送 Blob;它只演示客户端的流转关系,服务端必须实际支持 gzip 请求体解码。

async function uploadGzipText(chunks, endpoint) {
  const blob = await compressTextChunks(chunks);

  // Content-Encoding 表示请求体已经是 gzip 编码,不能省略或写成普通文本类型。
  const response = await fetch(endpoint, {
    method: "POST",
    headers: {
      "Content-Type": "text/plain; charset=utf-8",
      "Content-Encoding": "gzip",
    },
    body: blob,
  });

  // HTTP 错误不一定会抛异常,显式检查状态并保留响应体用于排障。
  if (!response.ok) {
    throw new Error(`upload failed: ${response.status}`);
  }
  return response;
}

Content-Type 描述解压后原始内容的媒体类型,Content-Encoding 描述传输中的编码方式。两者不是二选一:服务端先按 gzip 解码,再按文本类型处理内容。

兼容性与常见误区

现象常见原因处理方式
结果无法显示把 gzip 字节当字符串读取保存为 Blob 或 Uint8Array,读取端使用对应的解压逻辑
只收到半个文件源流未关闭,或没有等待 reader 返回 done在生产者完成后调用 close,并等待完整读取
服务端返回解码错误请求头缺少或错误设置 Content-Encoding确认服务端按 gzip 解析请求体
旧浏览器没有构造函数Compression Streams API 支持范围不足根据目标浏览器矩阵准备降级方案或压缩库

Compression Streams API 的常见实现已经覆盖主流浏览器,但项目仍应按自己的浏览器矩阵确认兼容性。文章中的管道是浏览器 API 的使用示意,不把静态说明图当作运行截图或兼容性证明。

小结

记住顺序即可:字符串块先经过 TextEncoderStream 变成 UTF-8 字节,再经过 CompressionStream("gzip") 变成压缩字节;读取端等待 done=true,上传端用 Content-Encoding: gzip 告诉服务端如何还原。这样既保留了流式处理的低峰值特性,也避免把文本、字节和压缩编码混成一个概念。

相关问题

CompressionStream 能直接压缩 JavaScript 字符串吗?

不能直接把字符串当作它的输入契约。先用 TextEncoder 或 TextEncoderStream 转成 UTF-8 字节,再进入压缩流。

gzip 压缩结果应该用什么类型保存?

可以收集为 Uint8Array,也可以把字节块组成 Blob。不要用普通字符串保存,否则会破坏二进制数据。

请求头里的 Content-Type 要写 gzip 吗?

不应该。Content-Type 写解压后内容的类型,例如 text/plain;Content-Encoding 才写 gzip。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Linux ss -s 怎样快速查看 TCP 连接汇总Linux ss -s 怎样快速查看 TCP 连接汇总
上一篇
Linux ss -s 怎样快速查看 TCP 连接汇总
JavaScript URLPattern 怎样匹配带命名参数的路径
下一篇
JavaScript URLPattern 怎样匹配带命名参数的路径
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    766次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    764次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    845次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    815次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    643次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码