当前位置:首页 > 文章列表 > 文章 > 前端 > TransformStream 怎样转换流式响应

TransformStream 怎样转换流式响应

来源:17golang原创 2026-10-25 14:39:58 0浏览 收藏

我第一次把接口改成流式返回时,真正卡住的不是 fetch(),而是“收到一小段数据后,应该在哪里改写它”。答案是把 Response.body 当成输入流,先用 TextDecoderStream 把字节转成文本,再用 TransformStream 在管道中逐块处理,最后交给异步消费者。这样不用等完整响应到齐,也能保持流式消费。

官方资料:https://developer.mozilla.org/en-US/docs/Web/API/TransformStream

下面的示例只做一个边界清楚的任务:把文本响应按块转成大写。生产代码还要处理响应状态、取消信号、跨 chunk 的半行文本和转换异常。

先分清 writable、transform 和 readable

TransformStream 不是一个只接收字符串的函数,而是一对彼此连接的流:writable 是输入端,转换器的 transform(chunk, controller) 负责处理输入,readable 是输出端。写入的数据不会凭空消失,而是由转换器决定是否通过 controller.enqueue() 产生新 chunk。

Response.body、TextDecoderStream、TransformStream 两端与异步消费者的静态关系说明图
图1:流式响应转换管道的静态结构关系;这是说明图,不是浏览器截图或运行证据。

放进 ReadableStream.pipeThrough() 后,调用方继续拿到的是转换后的 readable。这也是最容易弄反的地方:不要把 TransformStream 本身当成最终读取器,真正消费的是管道返回的可读流。

把响应字节解码后接入 TransformStream

网络响应体通常先表现为字节流,所以文本场景要先解码。下面的转换器按 chunk 处理字符串,再把处理结果送出:

// 把每个文本 chunk 转成大写,并保持流式输出
function upperCaseStream() {
  return new TransformStream({
    transform(chunk, controller) {
      // 处理失败时让管道进入错误状态,避免静默丢数据
      if (typeof chunk !== "string") {
        controller.error(new TypeError("输入必须是文本 chunk"));
        return;
      }
      controller.enqueue(chunk.toUpperCase());
    },
  });
}

async function readTransformedResponse(url, signal) {
  const response = await fetch(url, { signal });
  // 先检查 HTTP 状态,再读取 body,错误更容易定位
  if (!response.ok) {
    throw new Error(`HTTP ${response.status}`);
  }
  if (!response.body) {
    throw new Error("响应没有可读取的 body");
  }

  const stream = response.body
    // 浏览器响应体先从 Uint8Array 解码为字符串
    .pipeThrough(new TextDecoderStream())
    // 转换后的 readable 继续交给异步迭代器
    .pipeThrough(upperCaseStream(), { signal });

  for await (const chunk of stream) {
    // 这里可以把 chunk 增量写入页面或消息缓冲区
    console.log(chunk);
  }
}

这条链的顺序很重要:TextDecoderStream 解决编码边界,upperCaseStream() 解决业务转换,for await 负责消费结果。pipeThrough() 会把当前可读流锁定到这条管道上,因此不要再给同一个 response.body 另取一个 reader。

跨 chunk 数据要交给 lineBuffer

chunk 不是消息边界。服务端发送一行 JSON 或一条事件时,换行符可能被拆到下一个 chunk。若在每个 transform() 调用里直接 split("\n"),就会把半行当成完整消息。

输入 chunk、lineBuffer、完整行、flush、controller.error 和 AbortSignal 的静态职责边界说明图
图2:跨 chunk 文本处理与收尾、取消边界;这是说明图,不是运行结果或截图。

更稳妥的做法是保留未完成的尾部,遇到完整换行时才输出。流关闭前再由 flush() 处理最后一段:

// 将可能跨 chunk 的文本按完整换行拆开
function lineStream(onLine) {
  let lineBuffer = "";

  return new TransformStream({
    transform(chunk, controller) {
      // 尾部暂存起来,避免半行被提前交给业务层
      lineBuffer += chunk;
      const lines = lineBuffer.split("\n");
      lineBuffer = lines.pop() ?? "";

      for (const line of lines) {
        if (line.trim() !== "") {
          controller.enqueue(onLine(line));
        }
      }
    },
    flush(controller) {
      // writable 关闭时,最后没有换行的内容仍然需要处理
      if (lineBuffer.trim() !== "") {
        controller.enqueue(onLine(lineBuffer));
      }
    },
  });
}

如果转换逻辑需要异步操作,可以让 transform() 返回 Promise;但不要在内部无限积压任务。管道会依据消费者速度施加背压,消费者变慢时,上游读取也会受到约束。

生产环境要把错误和取消放在管道边界

网络请求的取消应由调用方持有 AbortController,并把它的 signal 传给 fetch 与 pipeThrough。这样用户离开页面或切换会话时,未完成的读取和转换不会继续占用资源。

// 页面销毁或用户切换请求时调用 controller.abort()
const controller = new AbortController();

readTransformedResponse("/api/stream", controller.signal)
  .catch((error) => {
    // AbortError 属于主动取消,不必当成服务端故障上报
    if (error.name === "AbortError") return;
    console.error("流式响应转换失败", error);
  });

// 取消 fetch、pipeThrough 和后续消费
// controller.abort();

需要区分三类错误:HTTP 非 2xx 是响应状态问题,controller.error() 是转换器无法处理输入,AbortError 则通常是调用方主动取消。把三者混成一个“读取失败”,排查时很难判断应该重试、修复数据还是结束任务。

什么时候适合用 TransformStream

场景建议原因
文本解码、过滤、脱敏、逐行解析适合每个 chunk 都能独立处理,或能用缓存补齐边界
必须看到完整 JSON 后才能决定结果谨慎先收集完整消息,再交给 JSON 解析器更清楚
需要改变字节编码先明确类型不要把 Uint8Array 和字符串混在同一转换器里

浏览器支持方面,MDN 将 TransformStream 和 pipeThrough() 标为广泛可用,但具体项目仍应按目标浏览器矩阵确认;兼容环境不足时,可以保留一次性读取或服务端预处理作为降级路径。最关键的判断不是“能不能 new”,而是转换任务是否尊重 chunk 边界、错误传播和背压。

常见问题

为什么 transform 收到的不是一整条消息?

流的 chunk 由底层生产者和队列决定,不等同于业务消息。需要完整行、完整事件或完整 JSON 时,必须自己维护缓存和结束条件。

pipeThrough 后还能继续读取原始 response.body 吗?

通常不能。管道会锁定源流,应该消费 pipeThrough() 返回的可读流;如果要分发给多个消费者,需要在设计阶段明确 tee 或独立数据源。

总结:把 Response.body 看成字节输入,把 TextDecoderStream 放在编码边界,把 TransformStream 放在业务转换边界,再用 flush()、AbortSignal 和错误传播补齐生命周期。这样转换流式响应时,既能增量处理,也不会把 chunk 误当成消息。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
@scope 怎样限制选择器范围@scope 怎样限制选择器范围
上一篇
@scope 怎样限制选择器范围
AbortSignal.timeout 怎样给请求设置超时
下一篇
AbortSignal.timeout 怎样给请求设置超时
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    686次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    701次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    757次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    719次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    558次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码