当前位置:首页 > 文章列表 > Golang > Go教程 > Go json.Decoder 怎样处理多个连续 JSON 值

Go json.Decoder 怎样处理多个连续 JSON 值

来源:17golang原创 2026-10-22 21:37:06 0浏览 收藏

Go 里要连续读取多个顶层 JSON 值,直接用同一个 json.Decoder 反复调用 Decode 即可。每次调用取出下一个完整值;读完后返回 io.EOF,它表示输入正常结束,不是业务错误。只有在中途拿到语法错误或类型错误时,才应该终止并记录问题。

一句话结论:把 io.Reader 传给 json.NewDecoder,循环调用 Decode 方法;碰到顶层连续的JSON值直接用 io.EOF 做退出判断,只有解析嵌套数组内部元素的时候,才需要用 More 方法判断是否还有待解析元素。

先分清连续值和数组

下面两种输入都可能出现在日志流、消息管道或批量接口里,但读取协议不同:

输入形态示例读取判断
多个顶层值{"id":1} {"id":2}每次 Decode 一个值,直到 io.EOF
一个数组[{"id":1},{"id":2}]先读 [,在数组内用 More,最后读 ]

两者都可以流式处理,但不要用 dec.More() 判断顶层连续值。More 的语义是当前数组或对象容器里是否还有元素;顶层输入没有这个容器上下文。

输入流、json.Decoder、内部缓冲、JSON 值和目标结构体的静态关系图
说明图:输入层、解码层和结果层的边界,重点看 Decoder 的内部缓冲与目标结构体之间的关系。

用 Decode 循环读取多个 JSON 值

对于换行或空白分隔的对象,循环体只负责处理一个对象,循环条件负责区分正常结束和异常。不要把所有输入先读成 []byte 再切字符串,这样既容易破坏 JSON 字符串内部的空白,也失去了流式读取的意义。

package main

import (
	"encoding/json"
	"fmt"
	"io"
	"strings"
)

type Event struct {
	ID   int    `json:"id"`
	Kind string `json:"kind"`
}

func main() {
	// 空白分隔两个顶层 JSON 对象,不需要额外的逗号或数组括号。
	input := strings.NewReader(`{"id":1,"kind":"created"}
{"id":2,"kind":"updated"}`)
	dec := json.NewDecoder(input)

	for {
		var event Event
		// 每次 Decode 只接收一个完整 JSON 值,并写入当前对象。
		err := dec.Decode(&event)
		if err == io.EOF {
			// 没有下一个值时,结束是正常结果。
			break
		}
		if err != nil {
			// 第二个值损坏时不能当作正常结束,应保留错误上下文。
			panic(fmt.Errorf("decode event: %w", err))
		}
		fmt.Printf("%d %s\n", event.ID, event.Kind)
	}
}

这里的关键是每轮重新声明 event,避免上一个对象的字段值在异常输入时残留。生产代码通常会把 panic 换成带输入来源、记录编号或请求 ID 的错误返回。

数组输入要用 Token 和 More

如果协议明确规定输入必须是一个 JSON 数组,就先读取数组开始分隔符,再用 More 读取元素。这样可以在读完元素后检查闭合分隔符,发现数组没有正常结束。

func readArray(dec *json.Decoder) error {
	// 读取并确认数组开始分隔符,避免把对象误当成数组。
	token, err := dec.Token()
	if err != nil {
		return err
	}
	if token != json.Delim('[') {
		return fmt.Errorf("expected array, got %v", token)
	}

	for dec.More() {
		var event Event
		// More 只表示当前数组仍有元素,Decode 负责取出该元素。
		if err := dec.Decode(&event); err != nil {
			return err
		}
		fmt.Println(event.ID, event.Kind)
	}

	// 读取闭合分隔符,确认数组边界完整。
	end, err := dec.Token()
	if err != nil {
		return err
	}
	if end != json.Delim(']') {
		return fmt.Errorf("expected array end, got %v", end)
	}
	return nil
}
连续 JSON 值、数组元素、io.EOF 和后续字节的静态关系图
说明图:值域、容器边界和输入尾部之间的关系;数组元素依赖容器边界,而顶层连续值依赖 Decode 与 io.EOF。

生产环境要处理的三个边界

中途坏数据。如果第一条能解码、第二条出现非法 JSON,第二次 Decode 会返回语法错误。此时不能把它改判为 io.EOF,否则调用方会误以为整条流已经完整消费。

尾部不是空白。连续 JSON 值后面如果还有不属于 JSON 的字节,下一次 Decode 通常会报语法错误。若协议允许 JSON 后拼接其他格式,应先在协议层切分,而不是依赖 Decoder 猜测边界。

解码器会预读。NewDecoder 自带缓冲,可能从底层 Reader 读取超出当前值的数据。如果解码完一个值后还要接管剩余字节,可在下一次 Decode 前读取 dec.Buffered();这个 Reader 只在下一次 Decode 或 Token 前有效,且它反映的是已读入 Decoder 但尚未消费的数据。

对象字段还可以按协议选择 dec.DisallowUnknownFields(),让结构体中不存在的字段尽早暴露。它只影响目标是结构体的解码,不会替代输入长度限制、请求超时或上游消息大小控制。

发布前检查清单

  • 输入协议是否明确是连续顶层值,还是一个数组。
  • 循环是否只把 io.EOF 当作正常结束。
  • 每个对象是否使用独立目标变量,并保留错误上下文。
  • 数组是否检查了 [ 与 ] 的边界。
  • 是否考虑 Decoder 预读,以及是否需要在下一次 Decode 前接管 Buffered 数据。

相关问题

多个 JSON 对象之间必须换行吗?不必须,JSON 空白都可以作为分隔;换行只是日志和流文件里更容易观察的写法。

能不能用 json.Unmarshal 处理这类输入?如果输入是一个完整数组,可以;如果是多个顶层值,Decoder 更适合逐个读取并控制结束边界。

为什么读完一个值后底层 Reader 的位置看起来超前?因为 Decoder 可能预读。需要混用底层 Reader 时,先按官方语义处理 Buffered 返回的剩余数据,再继续读取底层流。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go unicode.IsSpace 怎样识别配置文本里的空白字符Go unicode.IsSpace 怎样识别配置文本里的空白字符
上一篇
Go unicode.IsSpace 怎样识别配置文本里的空白字符
Go json.SyntaxError Offset 怎样找到 JSON 语法错误位置
下一篇
Go json.SyntaxError Offset 怎样找到 JSON 语法错误位置
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    592次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    629次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    661次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    631次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    446次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码