讲师中心 微信公众号

工具推荐

视频效率加速
Seko
Seko

AI短剧一键生成成片

剧云
剧云

中文短剧剧本制作平台

updream

一键生成高质量推广成片

Laper
Laper

剧本策划到成片协作

使用Golang Singleflight合并请求_高并发下的数据库保护

落强姑娘_2890

落强姑娘_2890

发布时间:2026-02-22 18:26:03

|

145人浏览过

|

来源于php中文网

原创

singleflight 通过在请求发起瞬间拦截相同 key 的多个 goroutine,仅放行一个执行函数,其余等待其结果,从而避免重复数据库查询;它非缓存非锁,核心是共享执行过程。

使用golang singleflight合并请求_高并发下的数据库保护

为什么 singleflight 能挡住重复数据库查询

它不是缓存,也不是锁,而是在请求发起的「瞬间」把相同 key 的多个 goroutine 拦下来,只让其中一个真正执行函数,其余等待结果返回——哪怕这个函数是查 MySQL、调 HTTP 或读文件。关键在于:所有并发请求共享同一份执行过程,避免 N 个 goroutine 同时打到数据库。

常见错误现象:context deadline exceeded 突然变多、慢查询日志里出现大量一模一样的 SQL、Prometheus 上数据库 QPS 峰值远超业务实际请求数。

  • 适用场景:用户详情页(多个微服务同时查同一 user_id)、配置中心热加载(多个协程争抢拉取 config.json)、GraphQL 字段解析中反复查同一条关联数据
  • 不适用场景:需要各自隔离上下文(如不同 context.WithTimeout)、函数本身有副作用(如发消息、扣库存)且不能被合并
  • singleflight.Group.Do 返回的是 (interface{}, error, bool),第三个 bool 表示是否为本次执行者;别直接用 err != nil 判断失败,要结合 shared 字段看是不是别人执行出错了

Do 和 DoChan 怎么选

Do 是阻塞式,适合普通 HTTP handler 或同步逻辑;DoChan 返回 chan singleflight.Result,适合想控制超时、或需要和 select 配合的场景(比如等 DB 查询 + 等 Redis 缓存,谁先来用谁)。

容易踩的坑:DoChan 不会自动关闭 channel,如果函数 panic 或 context cancel,channel 会永远卡住;必须用 select 配合 default 或 timeout 来兜底。

立即学习“go语言免费学习笔记(深入)”;

Golang Uber Dig
Golang Uber Dig

使用 uber-go/dig 在 Golang 中实现依赖注入——基于反射容器,提供 Provide/Invoke、dig.In/dig.Out 参数与结果对象,支持命名依赖等

下载
  • 参数差异:Do(key string, fn func() (interface{}, error)) —— fn 无参;DoChan(key string, fn func() (interface{}, error)) —— 返回 channel,但 fn 还是一样的无参函数
  • 性能影响:两者底层共用同一 map+mutex,开销几乎一致;但 DoChan 多一次 goroutine 调度和 channel 发送,QPS 极高时(>5w/s)可测出微小差距
  • 示例:v, err, shared := g.Do("user:123", func() (interface{}, error) { return db.QueryRow("SELECT name FROM users WHERE id = ?", 123).Scan(&name) })

key 设计不当会导致合并失效或误合并

key 是字符串,但业务参数往往是 struct 或 map。直接 fmt.Sprintf("%v", req) 看似方便,实际会因字段顺序、空字段、浮点数精度导致 key 不稳定;而用固定字符串(如硬写 "get_user")又会让所有请求挤进同一个队列,失去并发性。

正确做法是提取真正决定结果一致性的字段,拼成确定性字符串,比如 user_id + lang,中间加分隔符。

  • 常见错误:把 context.Context 当作 key 一部分(地址每次不同)、把时间戳或 traceID 写进 key(必然不合并)、用 JSON 序列化 struct 但没排序字段
  • 兼容性注意:如果后期加了新参数(比如支持 with_profile),旧 key 格式必须兼容,否则老客户端和新客户端的请求无法合并,变成两股流量
  • 建议用 strings.Join([]string{strconv.Itoa(u.ID), u.Lang}, ":"),比 fmt.Sprintf 更快更可控

panic、context cancel 和超时怎么处理

singleflight 本身不处理 panic,也不感知 context;它只管“谁来跑函数”。所以函数内部必须自己 recover panic,且显式检查 ctx.Err() 并提前返回——否则一个 goroutine 卡死,整个 key 下的所有等待者都会 hang 住。

错误信息如 panic: runtime error: invalid memory address 出现在日志里,往往是因为没 recover;而 context canceled 被忽略,则表现为某些请求永远收不到响应。

  • 必须在 fn 里做:select { case ,不能只依赖上层 handler 的 timeout
  • panic 后的结果不会被缓存,但当前这一轮所有等待者都会收到 panic 对应的 error;下一轮相同 key 请求仍会重试
  • 如果 DB 查询用了 db.QueryContext(ctx, ...),它自身会响应 cancel,但仍需在外层加 defer recover,防止驱动 bug 或其他逻辑 panic
事情说清了就结束。最常漏掉的是:函数里没检查 context、key 拼错导致合并失效、以及以为 singleflight 能替代缓存——它只消重,不存结果。

热门AI工具

更多
Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

539

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

616

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1296

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

811

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1906

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

5454

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

2534

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

4386

2025.06.17

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

40

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go-Zero HTTP服务开发指南
Go-Zero HTTP服务开发指南

共0课时 | 0人学习

Go-Zero goctl安装与使用手册
Go-Zero goctl安装与使用手册

共0课时 | 0人学习

Go-Zero框架快速开始指南
Go-Zero框架快速开始指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn