当前位置:首页 > 文章列表 > 文章 > 前端 > 前端 ReadableStream 分块读取 怎样处理

前端 ReadableStream 分块读取 怎样处理

来源:17golang原创 2026-10-22 19:19:51 0浏览 收藏

前端要分块处理网络响应时,先从 response.body 取出 ReadableStreamDefaultReader,再循环调用 read()。关键不是把每个 value 直接转成字符串,而是让 TextDecoder 保留跨分块的 UTF-8 字节,并在流结束时 flush。这样既能边到边显示,也不会因为一个中文字符被拆到两个 chunk 中而乱码。

这篇只讨论浏览器 Fetch 返回的默认可读流:读取、解码、结束、异常和提前取消。ReadableStream 的 getReader() 会锁定流;同一时刻不能再拿第二个 reader,直到当前 reader 释放锁。

先看清分块读取的关系

浏览器拿到的 value 通常是 Uint8Array,它表示“当前到达的一段字节”,不保证对应一个完整的业务行、JSON 对象或中文字符。下面的结构图把响应体、reader、解码器和消费层放在同一条静态关系里,帮助定位每个职责。

ReadableStream 响应体、reader、TextDecoder 与文本消费层的关系说明图
图1:ReadableStream 分块读取关系说明图;它展示字节块经过 reader 和 TextDecoder 后进入文本消费层,是静态结构图,不是浏览器截图。

用 reader 和 TextDecoder 按块读取

默认 reader 的 read() 每次返回一个 Promise,结果是 { done, value }。当还有数据时 done 为 false;流关闭后变为 true,此时 value 不应再使用。

async function readTextInChunks(response, onChunk) {
  // 没有响应体时,避免对 null 调用 getReader。
  if (!response.body) {
    return;
  }

  const reader = response.body.getReader();
  // stream: true 会保留尚未组成完整字符的 UTF-8 字节。
  const decoder = new TextDecoder("utf-8");

  try {
    while (true) {
      // 每次只取下一段字节,value 的边界由底层流决定。
      const { done, value } = await reader.read();
      if (done) {
        // flush=true 处理最后仍留在解码器中的字节。
        const tail = decoder.decode();
        if (tail) onChunk(tail);
        break;
      }

      const text = decoder.decode(value, { stream: true });
      if (text) onChunk(text);
    }
  } finally {
    // 读取结束或发生异常后释放当前 reader 对流的锁。
    reader.releaseLock();
  }
}

const response = await fetch("/api/stream");
await readTextInChunks(response, (chunk) => {
  // 这里可以追加到 UI 缓冲区,而不是假设 chunk 是完整业务记录。
  output.textContent += chunk;
});

这个函数把“字节流读取”和“业务消费”分开:onChunk 收到的只是可显示文本片段。如果接口协议按换行分隔,还要在外层维护一个字符串缓冲区,找到换行符后再提交完整记录。

为什么不能直接对每个 value 调用 TextDecoder

UTF-8 一个字符可能占多个字节,而网络 chunk 只是传输边界。例如一个字符的前两个字节在本次 read() 返回,剩余字节在下次返回。如果每次都新建解码器,或者不传 { stream: true },解码器无法记住未完成字符,结果就可能出现替换字符。

可以把图中的“跨块字节缓冲”理解为解码器的责任:调用 decode(value, { stream: true }) 表示后面还会有数据;只在 done 时调用无参数的 decode(),让它完成最后一次 flush。业务层则只处理已经解码出的文本。

ReadableStream 从分块字节到结束、异常与取消的关系说明图
图2:分块读取生命周期说明图;图中区分继续读取、正常结束、异常和取消四个静态边界,不代表实际执行截图。

结束、异常和提前取消怎么分

正常结束是 read() 返回 done: true;网络故障或底层流出错时,read() 的 Promise 会 reject,应由 catch 或上层错误边界处理。两者都不应该靠“读到空字符串”判断,因为空文本和流结束不是同一个语义。

async function readUntilMatch(response, keyword) {
  if (!response.body) return false;

  const reader = response.body.getReader();
  const decoder = new TextDecoder();
  let buffer = "";

  try {
    while (true) {
      // 错误会在 await reader.read() 处抛出,交给调用方决定如何提示。
      const { done, value } = await reader.read();
      if (done) {
        // 正常结束时补齐最后的 UTF-8 片段。
        buffer += decoder.decode();
        return buffer.includes(keyword);
      }

      buffer += decoder.decode(value, { stream: true });
      if (buffer.includes(keyword)) {
        // 已经拿到目标内容,剩余排队数据不再需要。
        await reader.cancel("keyword found");
        return true;
      }

      // 只保留末尾窗口,避免长响应让字符串无限增长。
      if (buffer.length > 4096) buffer = buffer.slice(-2048);
    }
  } finally {
    // releaseLock 只释放锁;cancel 才表示放弃剩余数据。
    reader.releaseLock();
  }
}

try {
  const found = await readUntilMatch(response, "目标片段");
  console.log(found ? "已找到" : "流已结束");
} catch (error) {
  // 真实应用中应把网络错误映射成用户可理解的状态。
  console.error("读取流失败", error);
}

cancel() 和 releaseLock() 作用不同:前者告诉底层“不再需要这条流”,排队数据会被放弃;后者只解除当前 reader 的占用。组件卸载或用户主动停止时通常需要先取消,再释放锁。

常见边界与快速检查

现象优先检查处理方式
中文偶尔乱码是否每块都新建解码器复用一个 TextDecoder,并使用 stream 模式
最后几个字符丢失done 分支是否 flush在 done 为 true 时调用 decoder.decode()
第二次读取报锁定旧 reader 是否仍持有流结束后 releaseLock;不要并发调用多个 reader
用户停止后仍在接收是否只释放锁却没有取消对 reader 调用 cancel(reason),再释放锁

把这四项和接口协议一起确认,基本就能覆盖大多数“ReadableStream 分块读取不对”的问题。特别是 SSE、NDJSON 或自定义文本协议,都应该先解决“chunk 不等于消息”的边界,再决定怎样组装业务数据。

相关问题

ReadableStream 的 value 一定是字符串吗?

不一定。Fetch 响应体的默认读取结果通常是字节数组,需要用 TextDecoder 转换;自定义流也可以 enqueue 其他类型,具体取决于底层源。

什么时候用 getReader({ mode: "byob" })?

只有在处理可读字节流并希望由调用方提供缓冲区时才考虑 BYOB。普通文本响应使用默认 reader 更直接,文章中的分块解码逻辑也更容易保持清晰。

官方参考:https://developer.mozilla.org/zh-CN/docs/Web/API/ReadableStream

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
systemd-analyze calendar 校验 OnCalendar 表达式的实用方法systemd-analyze calendar 校验 OnCalendar 表达式的实用方法
上一篇
systemd-analyze calendar 校验 OnCalendar 表达式的实用方法
前端 DataView 读取二进制字段 怎样避免字节序错误
下一篇
前端 DataView 读取二进制字段 怎样避免字节序错误
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    591次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    627次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    661次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    631次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    445次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码