当前位置:首页 > 文章列表 > Golang > Go教程 > Go JSON Decoder 为什么读到 EOF:连续 JSON、空白与尾部脏数据怎么判

Go JSON Decoder 为什么读到 EOF:连续 JSON、空白与尾部脏数据怎么判

来源:17golang原创 2026-07-27 13:19:14 0浏览 收藏

处理 HTTP 请求体或者消息队列里的 JSON 数据时,json.Decoder.Decode 返回 io.EOF 不一定是异常报错。连续 JSON 流全部读完的场景下,EOF 属于正常结束状态;如果是 JSON 在传输中途被截断,通常会先返回语法错误;要是只做了一次解码,第一个对象解析成功就直接返回,反而很容易放过尾部的脏数据。

要点速览
  • 单个 JSON 请求体通常只允许承载一个值,解码完成后还要确认后面没有多余的第二个值。
  • 处理连续 JSON 流要循环调用 Decode,循环末尾收到 io.EOF 代表整个流正常结束。
  • 中途截断、非法字符溢出、额外第二个 JSON 值是三类完全不同的问题,日志里要保留对应的不同特征证据。
  • 不要把“第一次 Decode 成功”当成完整的输入校验逻辑。

先把 EOF 放回 JSON 读取现场

下面这段代码会读取两个紧挨着写的 JSON 对象。第一次 Decode 能正常读出订单对象,第二次读出用户对象;第三次再调用读才会返回 EOF。EOF 出现在流的最末尾,完全不代表前面两个 JSON 对象有解析问题。

var in = strings.NewReader(`{"id":101}{"id":102}`)
dec := json.NewDecoder(in)

for {
    var item struct {
        ID int `json:"id"`
    }
    err := dec.Decode(&item)
    if errors.Is(err, io.EOF) {
        break
    }
    if err != nil {
        return fmt.Errorf("decode item: %w", err)
    }
    fmt.Println(item.ID)
}

这里的判断顺序非常关键:先单独判断 EOF,再处理其余错误。不要把所有非 nil 的错误都统一打印成“JSON 格式错误”,不然会把消息流正常结束和输入本身损坏这两类完全不同的场景混为一谈。

Go json.Decoder 连续 JSON 流:两个对象依次解码,末尾 EOF 表示正常结束

单对象接口为什么要再 Decode 一次

很多对外接口的约定里,请求体只能携带一个 JSON 值。这时候你只调用一次 Decode 是不够的,因为输入 {"name":"go"}{"name":"extra"} 的第一次解码也能正常返回成功。安全的标准做法是:解出主业务对象之后,再额外解码一次,只有拿到 EOF 结果的时候,才能说明后面没有藏着第二个额外的 JSON 值。

func decodeOne(r io.Reader, dst any) error {
    dec := json.NewDecoder(r)
    if err := dec.Decode(dst); err != nil {
        return fmt.Errorf("read body: %w", err)
    }

    var extra any
    err := dec.Decode(&extra)
    if errors.Is(err, io.EOF) {
        return nil
    }
    if err == nil {
        return errors.New("request body contains more than one JSON value")
    }
    return fmt.Errorf("check trailing JSON: %w", err)
}

第二次解码遇到空白字符之后返回 EOF,属于完全符合预期的结果;如果额外读出了第二个业务值,说明调用方多发了内容;如果尾部是半截不完整的 JSON,就应该直接按非法请求处理。这个几行代码的小检查,能挡住代理内容拼接、客户端参数误写、请求体复用带来的很多非常隐蔽的线上问题。

单个 JSON 请求体的尾部检查:主对象成功后分出空白结束、第二个值和脏数据三条路径

输入被截断时,错误通常长什么样

{"name":"go" 这样的半截不完整内容交给 Decoder 处理,第一次解码不会返回 EOF,反而会直接返回语法错误。EOF 只代表底层读取器已经没有更多字节可以读;如果当前正在解析的值还没闭合,解析器明确知道输入内容不完整,就会把出错位置和当前语法状态一并带出来。

var dst map[string]string
err := json.NewDecoder(strings.NewReader(`{"name":"go"`)).Decode(&dst)
if err != nil {
    var synErr *json.SyntaxError
    if errors.As(err, &synErr) {
        fmt.Println("bad JSON at byte", synErr.Offset)
    }
}

记录具体的错误类型,比只打印一句“decode failed”好用得多。服务端可以把 JSON 语法错误直接映射为 400 状态码,把读取超时或者连接中断的错误单独做指标统计;消息消费者则可以根据自身的消息协议规则,决定是直接丢弃、重试还是把这条消息转入死信队列。

连续 JSON 和 JSON 数组不要混用读取策略

连续 JSON 流适合边读边处理,不需要等整个输入全部加载完拼成完整数组;标准 JSON 数组则要先读取数组开始标记,再逐个读取内部元素,最后还要确认数组本身已经正常闭合。两种场景都能用标准库的 Decoder 实现,但结束判断的逻辑完全不一样,不能直接把“循环读到 EOF 就退出”的逻辑套到数组内部的读取流程里。

  • 单个对象场景:Decode 主值之后,再额外 Decode 一次确认拿到 EOF。
  • 连续多对象流场景:循环调用 Decode,遇到 EOF 就结束循环;中途碰到其他非 nil 错误立刻停止处理。
  • 标准数组场景:检查数组边界标记,内部每个元素解码成功不等于整个数组已经完整闭合。

常见问题:Decode、EOF 与尾部数据

第二次 Decode 返回 EOF 需要记录成错误吗?

对“请求体只能有一个 JSON 值”的接口来说,这个结果是成功信号,代表尾部只有空白字符。对连续流处理场景来说,它也是整个流的自然结束信号。是不是错误,完全由你当前业务的输入协议定义。

用 json.Unmarshal 能自动拒绝第二个 JSON 值吗?

Unmarshal 适合已经拿到完整字节的单个 JSON 值场景;如果你直接把整个请求体全部读到内存再解析,还要提前做好读取大小上限的控制。流式场景下直接用 Decoder,显式检查尾部剩余内容的逻辑会更清晰直接。

如何避免恶意请求把 Decoder 卡在大输入上?

在 HTTP 层先给请求体设置好大小上限和读取超时,业务层再补充字段范围和嵌套深度的约束。解析成功只说明内容符合 JSON 语法,完全不代表内容符合你的业务校验规则。

最后的判断

判断 json.Decoder 的错误之前,先理清楚当前输入协议约定是单值、连续流还是标准数组,再定义 EOF 对应的含义。单值接口要补上一次尾部校验,连续流要把 EOF 当成正常结束信号,截断和脏数据则按各自对应的错误类型单独处理。这样写出来的代码虽然多了几行,却能真正把“解析正常结束”和“请求内容损坏”这两类之前容易混的场景彻底分开。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go net/http 筛选表单怎么做:查询回填、空结果状态与安全输出Go net/http 筛选表单怎么做:查询回填、空结果状态与安全输出
上一篇
Go net/http 筛选表单怎么做:查询回填、空结果状态与安全输出
PHP mysqli 批量导入 CSV 怎么控制内存:分批事务、参数绑定与失败回滚
下一篇
PHP mysqli 批量导入 CSV 怎么控制内存:分批事务、参数绑定与失败回滚
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    97次使用
  • OpenCompass大模型评测体系详解:功能、使用指南与应用场景
    OpenCompass
    OpenCompass是上海AI实验室推出的开源大模型评测平台,提供CompassKit、CompassHub和CompassRank三大核心组件,支持LLM及多模态模型的一站式标准化评估与排行榜查询。
    28次使用
  • SuperCLUE中文大模型评测基准:功能、能力维度与应用指南
    SuperCLUE
    SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
    252次使用
  • C-Eval中文评测基准:大语言模型多学科能力评估指南
    C-Eval
    深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
    180次使用
  • AI Prompt Library:免费AI提示词库,助力ChatGPT高效创作与营销
    AI Prompt Library
    探索AI Prompt Library免费资源库,涵盖营销、写作及多场景AI提示词。兼容ChatGPT、Claude等工具,一键复制优化输出,提升工作效率。
    111次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码