当前位置:首页 > 文章列表 > Golang > Go问答 > 一项并发任务失败后如何让兄弟任务收敛:用 errgroup 组织首错与取消

一项并发任务失败后如何让兄弟任务收敛:用 errgroup 组织首错与取消

来源:17golang原创 2026-09-04 17:46:22 0浏览 收藏

当一组 Goroutine 共同完成一个请求时,真正棘手的不是“怎么启动”,而是某个任务失败以后,兄弟任务是否会停、调用方是否能拿到明确错误。只用 sync.WaitGroup 能等待结束,却不会替你传播错误或取消任务。需要这两条收敛链时,可以用 errgroup.WithContext:任务返回错误,派生 Context 被取消;g.Wait() 等全部已启动任务结束后返回一个错误。

本文先给结论:用一个 group 管理同一项工作,用派生 ctx 传入每个任务,把 ctx 继续交给真正执行 I/O 的 API;任务内部同时检查取消,最后只在调用方读取 Wait 的返回值。

快速判断

  • 只需要计数和等待:WaitGroup 足够。
  • 需要首错、兄弟取消和统一收尾:使用 errgroup.WithContext。
  • 取消要落到底层调用,如 http.NewRequestWithContext 或数据库的 Context API。

先看清 WaitGroup 与 errgroup 的边界

WaitGroup 解决的是“还有多少项工作没有完成”,errgroup.Group 则把任务函数改成 func() error,额外负责错误传播。它不是一个会自动杀死 Goroutine 的终止器:任务能否尽快结束,仍取决于函数有没有监听 ctx,以及底层依赖是否支持取消。

因此,下面的目标不是收集所有错误,而是为一次整体工作选择一个可处理的失败结果:先返回的非 nil 错误成为 Wait 的返回值;其他任务收到取消后应尽快返回。若业务需要完整错误列表,应另外设计错误聚合,不要误以为 errgroup 会自动保留全部错误。

用 WithContext 把首错变成兄弟任务的取消信号

核心写法是先派生 group 和 ctx,再把同一个 ctx 传给每个任务。以下示例模拟并行读取多个分片:其中一个分片失败时,其他分片不再继续接收新工作。

func loadAll(parent context.Context, ids []string) error {
    g, ctx := errgroup.WithContext(parent)
    for _, id := range ids {
        id := id
        g.Go(func() error {
            if err := ctx.Err(); err != nil {
                return err
            }
            return loadOne(ctx, id)
        })
    }
    return g.Wait()
}

这里的关键是“同一项工作只建一个 group”。不要为每个子任务单独建 group,也不要在外层用一个无关的 Background 覆盖 ctx,否则首错无法传播到兄弟任务。

errgroup 协作边界与取消边界静态关系图
图1:协作边界负责收集任务,取消边界负责传播首错;g.Wait 是调用方统一接收结果的位置。

把 ctx 传到真正执行 I/O 的函数

最常见的假收敛是只在任务入口判断一次 ctx.Err(),随后调用一个不接收 Context 的阻塞函数。这样外层虽然已经取消,HTTP 请求或数据库查询仍可能继续占用资源。

让取消信号穿过完整调用链。例如 HTTP 请求应使用 http.NewRequestWithContext(ctx, ...),数据库访问应选择带 Context 的查询方法;拿到响应后仍要关闭 Body,数据库 rows 也要在对应作用域释放。

func loadOne(ctx context.Context, id string) error {
    req, err := http.NewRequestWithContext(ctx, http.MethodGet,
        "https://api.example.test/items/"+id, nil)
    if err != nil {
        return err
    }
    resp, err := http.DefaultClient.Do(req)
    if err != nil {
        return err
    }
    defer resp.Body.Close()
    if resp.StatusCode >= http.StatusBadRequest {
        return fmt.Errorf("load %s: %s", id, resp.Status)
    }
    return nil
}
Context 到 HTTP 与数据库 I/O 的取消边界关系图
图2:取消只有穿过 worker 到达 HTTP 请求或数据库查询,才会影响真正占用资源的操作。

结果写入与收尾怎么判断

如果多个任务把结果写入同一个 map 或切片,先按索引分配独立槽位,或用互斥锁保护共享结构;errgroup 负责协作,不会替你消除数据竞争。任务返回后,调用方统一处理:

if err := loadAll(ctx, ids); err != nil {
    if errors.Is(err, context.Canceled) {
        // 上游主动取消,通常不当成业务失败
        return err
    }
    return fmt.Errorf("load items: %w", err)
}
return nil

还要区分两类取消:如果父 ctx 先超时,返回值可能就是 deadline;如果某个任务先返回业务错误,group 派生 ctx 会被取消,最终由 Wait 返回首个非 nil 错误。不要用 Goroutine 数量立即归零作为唯一证据,正确的收尾点是 Wait 已返回,且每个任务都从自己的函数返回。

常见问题

errgroup 会返回所有错误吗?

默认不会。Wait 返回一个非 nil 错误,工程上通常把它作为本次整体工作的失败原因;要保留多个错误,需要另行设计并发安全的收集器。

任务不支持 Context 时怎么办?

无法强制一个不支持取消的阻塞调用立刻停止。可以把它隔离到更小的边界、设置依赖自身的超时,或更换支持 Context 的 API;不要用关闭无关 channel 的方式假装已经取消。

总结:errgroup 的价值是把“首错—取消—统一等待”连起来,但真正的资源释放责任仍在任务函数和底层 I/O。先确定 group 的工作边界,再让 ctx 穿过每一层,最后以 g.Wait() 的返回值做一次明确收尾。

参考:errgroup 官方文档;Go 官方 Pipeline 与取消说明。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go govulncheck 结果怎么看不误判:source 模式与 binary 模式各自能证明什么Go govulncheck 结果怎么看不误判:source 模式与 binary 模式各自能证明什么
上一篇
Go govulncheck 结果怎么看不误判:source 模式与 binary 模式各自能证明什么
Go 私有模块在 CI 里突然走代理:用 GOPRIVATE、GONOSUMDB 和 GOPROXY 分开排查
下一篇
Go 私有模块在 CI 里突然走代理:用 GOPRIVATE、GONOSUMDB 和 GOPROXY 分开排查
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    548次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    601次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    628次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    581次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    406次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码