Go 用 errgroup 管理并发子任务:错误收敛、取消传播与限流
Go 用 errgroup 管理并发子任务:错误收敛、取消传播与限流并发拉一批数据,你大概率写过这样的代码:开五个 goroutine 各自请求一个接口,用sync.WaitGroup等它们全部结束。跑起来没问题,直到有一天某个接口挂了——其他四个还在傻等,错误也没人收,日志里只留下一条超时。更糟的是,第一个失败之后剩下的请求已经没意义了,却还在白白消耗连接和 CPU。golang.org/x/sync/errgroup就是为解决这类问题而生的:它在 WaitGroup 的基础上,帮你收敛第一个错误、并在出错时自动取消其他子任务。这篇把它的三个实战用法讲透:错误收敛、取消传播、并发限流。先看朴素写法的问题用原生 WaitGroup 并发请求,想拿到「任意一个失败就返回错误」并不容易:funcfetchAll(urls[]string)error{varwg sync.WaitGroupvarmu sync.MutexvarfirstErrerrorfor_,u:rangeurls{wg.Add(1)gofunc(ustring){deferwg.Done()iferr:fetch(u);err!nil{mu.Lock()iffirstErrnil{// 只记第一个错误,得手动加锁firstErrerr}mu.Unlock()}}(u)}wg.Wait()returnfirstErr}问题一眼看不完:要手动加锁保护firstErr、要手动Add/Done、而且某个请求失败后其余请求不会停,continue 跑到底。这些样板代码每写一次都容易漏一个wg.Done()导致死锁。用 errgroup 收敛错误同样的逻辑,errgroup 一把梭:importgolang.org/x/sync/errgroupfuncfetchAll(urls[]string)error{varg errgroup.Groupfor_,u:rangeurls{u:u// 捕获循环变量(Go 1.22 前必须,之后可省)g.Go(func()error{returnfetch(u)// 直接返回 error,g 帮你收第一个})}returng.Wait()// 任意一个非 nil,Wait 就返回它}g.Go接收一个func() error,内部帮你管理 WaitGroup;g.Wait()会阻塞到所有子任务结束,并返回第一个非 nil 的错误。锁、计数器全省了。注意语义:Wait只返回第一个错误,后面的错误会被丢弃。如果你需要所有错误,得自己在闭包里收集(比如塞进一个带锁的 slice),errgroup 不替你做这件事。关键升级:出错就取消其他任务上面的版本虽然收了错,但失败后其余请求仍会跑完。真正的价值在errgroup.WithContext:它派生一个 context,任意子任务返回非 nil 错误时,自动 cancel 这个 context,其他子任务只要监听了 ctx 就能及时退出。funcfetchAll(ctx context.Context,urls[]string)([]string,error){g,ctx:errgroup.WithContext(ctx)// 派生可取消的 ctxresults:make([]string,len(urls))fori,u:rangeurls{i,u:i,u g.Go(func()error{// 把 ctx 透传给下游,失败时这里会随 ctx 一起被取消body,err:fetchWithCtx(ctx,u)iferr!nil{returnerr// 触发 ctx cancel,其他 goroutine 收到 Done}results[i]body// 各写各的下标,无需加锁returnnil})}iferr:g.Wait();err!nil{returnnil,err}returnresults,nil}funcfetchWithCtx(ctx context.Context,urlstring)(string,error){req,_:http.NewRequestWithContext(ctx,http.MethodGet,url,nil)resp,err:http.DefaultClient.Do(req)// ctx 被 cancel 时这里立刻返回 erroriferr!nil{return,err}deferresp.Body.Close()b,err:io.ReadAll(resp.Body)returnstring(b),err}这里有个容易忽略的细节:results[i] body每个 goroutine 写不同下标,读写不重叠,所以不需要加锁。这是并发写 slice 安全的少数场景之一——前提是长度预分配好、各 goroutine 下标互不相同。要让取消真正生效,子任务里的阻塞操作必须监听 ctx。HTTP 用NewRequestWithContext,数据库用QueryContext,自己的循环用select { case -ctx.Done(): return ctx.Err() ... }。如果下游不吃 ctx,cancel 就是一纸空文,任务照样跑到底。用 SetLimit 限流,别一次开几千个 goroutine如果 urls 有几千个,上面的写法会瞬间开几千个 goroutine 和连接,把下游打挂。Go 1.20 起 errgroup 内置了SetLimit,限制同时运行的子任务数:funcfetchAll(ctx context.Context,urls[]string)error{g,ctx:errgroup.WithContext(ctx)g.SetLimit(10)// 最多 10 个 goroutine 并发for_,u:rangeurls{u:u g.Go(func()error{// 超过 10 个时,g.Go 会阻塞直到有空位returnfetchWithCtx2(ctx,u)})}returng.Wait()}SetLimit(n)之后,g.Go在并发数达到上限时会阻塞,直到有子任务结束腾出名额。这等价于自己维护一个容量为 n 的信号量 channel,但代码干净得多。注意SetLimit必须在任何g.Go之前调用,中途改会 panic。如果你不想让g.Go阻塞,而是希望「没名额就跳过」,可以用TryGo,它返回 bool 表示是否成功启动。一个真实的坑:漏传 ctx 导致取消失效最常见的翻车是这样:用了WithContext拿到新 ctx,却在子任务里图省事用了外层的旧 ctx 或context.Background()。g,ctx:errgroup.WithContext(parentCtx)g.Go(func()error{// 错误:用了 parentCtx,errgroup 的 cancel 传不进来returnfetchWithCtx(parentCtx,u)})errgroup.WithContext返回的新ctx 才是挂了 cancel 钩子的那个。子任务必须用这个新 ctx,取消才会传播。记住口诀:g, ctx : errgroup.WithContext(...)之后,组内一律用左边这个新ctx。小结并发子任务要「收敛第一个错误」,别再手写 WaitGroup 锁,用errgroup.Group。需要「一个失败就停掉其他」时用errgroup.WithContext,并把返回的新 ctx透传给每个子任务的阻塞调用。任务数很大时用SetLimit(n)限流,避免 goroutine 与连接爆炸;要非阻塞就用TryGo。各 goroutine 写不同 slice 下标可以免锁,但共享变量仍要自己保护。一句话记忆点:errgroup WaitGroup 第一个错误 自动取消 限流,但取消能不能生效,全看你有没有把新 ctx 传下去。

相关新闻

深度探索Java字节码:5个实战技巧助你成为JVM专家

深度探索Java字节码:5个实战技巧助你成为JVM专家

深度探索Java字节码:5个实战技巧助你成为JVM专家 【免费下载链接】Krakatau Java decompiler, assembler, and disassembler 项目地址: https://gitcode.com/gh_mirrors/kr/Krakatau Krakatau是一款功能强大的Java字节码工具集,为开发者提供了直接…

2026/7/22 23:10:36 阅读更多 →
独立LLM应用开发:基于GPT-5.6-Sol的/goal功能完整实现指南

独立LLM应用开发:基于GPT-5.6-Sol的/goal功能完整实现指南

在构建独立LLM应用的过程中,如何让模型理解并执行复杂任务一直是开发者面临的挑战。DAIR.AI的Elvis Saravia提出的/goal功能设计,结合GPT-5.6-Sol模型的能力,为这一难题提供了创新解决方案。本文将完整拆解/goal功能的实现原理、环境搭建、代…

2026/7/22 20:15:52 阅读更多 →
OpenCore Legacy Patcher完整指南:让旧Mac焕发新生,轻松升级最新macOS

OpenCore Legacy Patcher完整指南:让旧Mac焕发新生,轻松升级最新macOS

OpenCore Legacy Patcher完整指南:让旧Mac焕发新生,轻松升级最新macOS 【免费下载链接】OpenCore-Legacy-Patcher Experience macOS just like before 项目地址: https://gitcode.com/GitHub_Trending/op/OpenCore-Legacy-Patcher 还在为你的老款…

2026/7/21 18:07:04 阅读更多 →

最新新闻

开放式耳机口碑怎么样?一文看懂十大口碑最好蓝牙耳机品牌

开放式耳机口碑怎么样?一文看懂十大口碑最好蓝牙耳机品牌

我本身就爱听歌会买很多耳机,这一年市面上主流型号基本都挨个体验过,入耳、半入耳、开放式全都试了一圈,家里攒的耳机堆了不少。讲实在的,现在开放式耳机火得不行,各种牌子款式一抓一大把,参数吹得一个比一…

2026/7/23 13:33:35 阅读更多 →
SolidWorks航母三维建模技术与工程实践

SolidWorks航母三维建模技术与工程实践

1. 项目背景与核心价值 这个三维建模展示项目以我国首艘航空母舰为原型,通过SolidWorks专业建模软件实现高精度数字化还原。作为工业设计领域的典型应用案例,它不仅展示了三维建模技术在军事装备可视化方面的强大能力,更体现了现代工业软件在…

2026/7/23 13:33:35 阅读更多 →
仓储管理系统有哪些?主流WMS系统类型、品牌与行业选型全解

仓储管理系统有哪些?主流WMS系统类型、品牌与行业选型全解

仓储管理系统(WMS)是企业供应链数字化的核心基础设施,专注解决仓库入库、上架、拣货、复核、出库、盘点、库存管控、多仓协同等全流程作业难题。很多企业在数字化升级时,都会疑惑仓储管理系统有哪些、不同系统的适配场景和核心差异…

2026/7/23 13:33:35 阅读更多 →
Unity水下渲染插件深度解析:Stylized Water 2扩展实战与移动端优化

Unity水下渲染插件深度解析:Stylized Water 2扩展实战与移动端优化

1. 项目概述与核心价值最近在做一个海洋主题的独立游戏,美术风格偏向卡通渲染,水体效果是重中之重。市面上找了一圈,Stylized Water 2(后文简称SW2)几乎是Unity卡通风格水面渲染的事实标准,效果和性能平衡得…

2026/7/23 13:33:35 阅读更多 →
工业设备logo灯极端环境改造方案与实施

工业设备logo灯极端环境改造方案与实施

1. 项目背景与需求解析 "PMO80绝影 | SW北极圈 | 改logo灯样式"这个标题看似简单,实则包含了三个关键信息点:设备型号(PMO80绝影)、使用环境(SW北极圈)和改造目标(改logo灯样式&#…

2026/7/23 13:33:35 阅读更多 →
B-树原理与数据库索引优化实战

B-树原理与数据库索引优化实战

1. B-树:数据库与文件系统的幕后英雄第一次接触B-树是在大学数据库课程上,教授讲到"索引"时轻描淡写地提了一句"底层用的是B-树",当时只觉得是个普通的数据结构。直到后来自己开发一个文件管理系统时,面对百万…

2026/7/23 13:32:35 阅读更多 →

日新闻

从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表)

从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表)

更多请点击: https://intelliparadigm.com 第一章:从单点好评到指数级传播:AI副业主理人必须掌握的4层口碑渗透模型(含ROI测算表) 当AI副业主理人不再仅满足于单次服务交付,而是主动构建可复用、可裂变、可…

2026/7/23 0:00:25 阅读更多 →
AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析

AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析

更多请点击: https://codechina.net 第一章:AI写作开头钩子设计:为什么你的AI文案完读率不足18%?——基于2,346篇A/B测试报告的归因分析 在对2,346篇跨行业AI生成文案的A/B测试数据进行聚类分析后,我们发现&#xff1…

2026/7/23 0:01:26 阅读更多 →
Chitchatter完整指南:免费开源的终极点对点安全聊天工具

Chitchatter完整指南:免费开源的终极点对点安全聊天工具

Chitchatter完整指南:免费开源的终极点对点安全聊天工具 【免费下载链接】chitchatter Secure peer-to-peer chat that is serverless, decentralized, and ephemeral 项目地址: https://gitcode.com/gh_mirrors/ch/chitchatter Chitchatter是一款革命性的安…

2026/7/23 0:01:26 阅读更多 →

周新闻

Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/22 8:58:19 阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/22 19:43:43 阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/22 12:54:44 阅读更多 →

月新闻