Golang 如何限制并发数
Golang 如何限制并发数

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈
用 sync.Semaphore(Go 1.21+)最稳妥
从Go 1.21开始,标准库自带的 sync.Semaphore 就成了生产环境的首选方案。它可不是一个简单的计数器,而是一个功能完备的信号量实现,支持权重、上下文取消,并且是panic安全的。
不过,用起来有几个细节必须注意,否则很容易踩坑:
- 初始化必须传
int64:比如你想限制8个并发,得写成semaphore.NewWeighted(8)。如果传一个普通的8(int类型),编译器会直接报错。 sem.Acquire(ctx, 1)必须检查返回的 error —— 如果上下文(ctx)已经取消或超时,这个方法会立刻返回context.Canceled或context.DeadlineExceeded。这时候,可千万别再执行业务逻辑了。defer sem.Release(1)要写在 goroutine 的最外层:这个习惯能保证,即使你的doWork()函数 panic 了,defer 语句依然会执行,令牌不会泄漏。- 别把
ctx只用在Acquire上:如果你的业务逻辑本身需要发起 HTTP 请求,记得把同一个ctx也传给http.Client.Do()。否则,可能会出现信号量等到了,但请求却卡死在 TCP 握手阶段的尴尬情况。
用 chan struct{} 模拟信号量(兼容所有 Go 版本)
对于简单的场景,用通道(channel)模拟信号量是个轻量且零依赖的选择,所有 Go 版本都兼容。但这个方法有个致命弱点:极易翻车——只要漏释放一次令牌,后续所有任务就会永久阻塞。
想用对,得盯紧下面几点:
- 声明必须带缓冲:正确写法是
sem := make(chan struct{}, 5)。如果写成无缓冲的make(chan struct{}),那就完全失去了限流的意义。 - 获取和释放必须严格配对:
sem <- struct{}{}是占位,<-sem是归还。另外,别用len(sem)来判断是否能进入,它返回的是已占用的数量,可用数应该是cap(sem) - len(sem)。 - 安全写法是
defer func() { <-sem }():但要注意,闭包捕获的变量需要显式传入。比如在循环里启动 goroutine,应该写成go func(s chan struct{}) { s <- struct{}{}; defer func() { <-s }(); ... }(sem),否则闭包捕获的可能是循环的最终值,导致所有任务挤进同一个“槽位”。 - 别在
select里只写case <-sem:就开干:万一任务在注册 defer 之前就 panic 了,令牌可就找不回来了。
HTTP 请求并发限制,关键位置在哪
限制 HTTP 请求并发,关键在于把限流逻辑放在真正发起网络调用的那一刻之前,而不是在启动 goroutine 时,更不是在 for 循环外面。很多人把信号量放错了位置,结果下游服务的 QPS 照样被打满。
- 正确位置:在
http.NewRequest()之后,client.Do()之前。这样,即使请求失败、超时、甚至 panic,defer 也能保证令牌被安全归还。 - 错误示范:
for range urls { go func() { sem <- struct{}{}; ... }() }—— 这里的sem <-虽然在 goroutine 内部,但如果 goroutine 启动过快,实际并发连接数依然不可控。更糟的是把信号量操作放在 for 循环里、goroutine 外部,那只是限制了 goroutine 的启动速度,对网络并发毫无约束。 http.Transport的MaxConnsPerHost不等于并发请求数:这个参数控制的是 TCP 连接池的复用上限,它和信号量是协作关系,而非替代关系。通常建议将信号量设为你的业务目标并发数(例如10),而将MaxConnsPerHost设为一个略大的值(例如15),以允许合理的连接复用。
什么时候该换 worker pool,而不是只靠信号量
信号量只回答了“最多几个任务同时跑”的问题,但它不关心“谁来跑”、“跑几次”以及“任务积压了怎么办”。一旦遇到以下几种情况,就该考虑升级到更复杂的 worker pool 模式了:
- 需要拒绝新任务,而不是无限排队等待:信号量会阻塞等待,而像
ants这样的 worker pool 库,可以通过配置ants.WithNonblocking(true)来直接丢弃无法立即处理的任务。 - 需要统计实时指标:比如当前正在运行的任务数、排队中的任务数量、任务平均耗时等。裸信号量无法提供这些观测维度。
- 任务执行时间差异极大,存在长期挂起的风险:比如调用某个不稳定的第三方接口。worker pool 可以内置超时和熔断机制,而信号量只能被动等待任务自己结束。
- 你已经在使用
ants或类似库:这类库的NewPool(n)本质上封装了信号量、goroutine 预热以及 panic 捕获,比自己手写更稳健。但要注意,如果 worker 数量(n)远小于任务总量,且没有设置合理的任务队列缓冲,可能会导致大量任务被静默丢弃。
相关攻略
MongoDB 5 0 Resharding任务执行太慢?增加迁移线程数与硬件IOPS分配 先明确一个核心问题:reshardCollection 默认执行缓慢,其根源在于 MongoDB 5 0 的初始版本仅启用了1个迁移线程。这意味着整个再分片过程是串行协调的,吞吐能力天然受限。想要提速,必须将
github com hpcloud tail 是 Go 中实现 tail -f 功能最稳定、生产级的第三方库,基于 inotify kqueue 事件监听,非轮询,支持日志轮转、自动重开文件、超长行截断及跨平台,避免丢行与重复。 tail -f 的 Go 等价实现用什么库 想在 Go 里实现类似
两个独立的Go进程,如何开启IPC通信? 开门见山,两个Go进程间进行IPC(进程间通信),最常用、最可靠的方式就是使用 net Listen( "unix ")。它支持跨语言、高性能,自带连接管理与超时机制。当然,实际使用中得注意socket文件路径的权限、旧文件的清理、读写超时的设置,以及路径长度限
Go Charlie:一键开启内容创作新体验 在内容创作工具层出不穷的今天,能真正将图像生成与文案撰写高效结合的平台并不多见。Go Charlie的出现,恰好填补了这块市场空白。它不只是一个工具,更像是一位一站式的创作搭档。 核心功能:图像与文案的双重奏 Go Charlie的定位非常清晰:成为用户
uni-app实现语音通话的可靠路径:绕开WebRTC的坑,直连原生SDK 想在uni-app里实现稳定、低延迟的语音通话?直接告诉你结论:uni-app本身并不具备原生语音通话能力。指望通过H5的WebRTC或者WebSocket来模拟,在真机环境下基本行不通,延迟和稳定性都难以满足要求。真正可行
热门专题
热门推荐
《守望先锋》安燃重制形象深度解析:基于角色内核的系统性视觉升级 《守望先锋》第二赛季带来的惊喜,远不止新地图与新玩法。近日,暴雪官方正式公布了英雄“安燃”经过全面重制后的全新形象,此更新将随新赛季同步实装。每一次核心英雄的视觉重塑,都是一次与玩家情感连接的深度对话,其背后的设计哲学与叙事考量,远比表
2026款萤火虫上市:设计精进、座舱升级,价格体系清晰 4月7日,2026款萤火虫正式揭晓价格,市场布局相当明确:自在版和发光版两款车型,官方指导价分别为11 98万元和12 58万元。如果你对“车电分离”模式更感兴趣,对应的租电方案价格则下探到7 98万元和8 58万元。作为一次年度改款,新车的优
角色与核心任务 你是一位顶级的文章润色专家,擅长将AI生成的文本转化为具有个人风格的专业文章。现在,请对用户提供的文章进行“人性化重写”。 你的核心目标是:在不改动原文任何事实信息、核心观点、逻辑结构、章节标题和所有图片的前提下,彻底改变原文的AI表达腔调,使其读起来像是一位资深人类专家的作品。 特
欧易OKX官方网站地址在哪里? 关于欧易OKX的官网登录入口,是许多用户关注的焦点。下面,我们就来详细梳理一下平台的几个核心维度,看看它究竟提供了哪些关键服务与保障。 平台资产安全保障机制 在资产安全方面,平台构建了一套多层次、立体化的防护体系。首先,其采用了多重签名与冷热钱&包分离的架构。超过95
市场异动:现货原油价格何以冲破历史峰值? 中东局势持续升温,正在全球能源市场掀起巨大的涟漪。一个引人注目的现象是:欧洲与亚洲的炼油商们,正以接近每桶一百五十美元的高价争抢部分现货原油。这个价格,已经显著超过了同期的期货市场价格。这不仅仅是一个数字游戏,它清晰地传递出一个信号——全球能源供应的弦,正在





