讲师中心 微信公众号
AI工具推荐 视频效率加速

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

大浩同学_9558

大浩同学_9558

发布时间:2025-07-21 09:47:01

|

662人浏览过

|

来源于php中文网

原创

go语言中并发安全的map实现有sync.map和分片map。sync.map适合读多写少、key基本固定的场景,如缓存系统和元数据管理;其优点是无需加锁、读取高效,缺点是频繁更新性能差、不支持遍历。分片map通过拆分map并独立加锁,降低锁粒度,适用于高频写入、需遍历及数据分布均匀的场景;其实现步骤包括:1.设置固定数量桶;2.每个桶使用独立锁;3.根据key哈希确定所属桶;4.各桶操作互不影响。性能对比上,读写混合或写多读少时分片map更优,而读多写少且key固定时sync.map表现更好。选型建议:1.优先考虑业务场景,静态数据用sync.map,动态数据用分片map;2.sync.map不支持直接range,分片map可轻松遍历;3.sync.map内存占用高,分片map可控性强。实现分片map时注意:1.分片数为2的幂;2.哈希函数分布均匀;3.每个桶可用sync.map或带锁map。两种方案各有优势,应根据实际需求选择。

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

Go语言中,map本身不是并发安全的,所以在多协程环境下使用时必须加锁。为了提高性能,官方在1.9版本引入了 sync.Map,它适用于某些特定场景下的读写操作。但除此之外,还有一种常见做法是“分片 map(Sharded Map)”,通过将数据分散到多个桶中减少锁竞争。

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

如果你在寻找一种更适合你项目的并发安全 map 实现方式,这里是一些实用建议和对比分析。


sync.Map 适合什么场景?

sync.Map 是 Go 标准库提供的一个并发安全 map 实现,内部结构优化过,对于读多写少、key 基本固定的场景表现很好。

立即学习go语言免费学习笔记(深入)”;

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

比如:

  • 缓存系统中存储一些不常变的配置项
  • 元数据管理,例如记录请求路径访问次数

它的特点是:

Golang如何提升并发安全map性能 对比sync.Map与分片map实现
  • 不需要额外加锁
  • 内部用原子操作和双 slot 结构来优化读取
  • 一旦某个 key 被频繁读取,后续读操作几乎无锁开销

但缺点也很明显:

  • 如果频繁更新或删除 key,性能会下降
  • 没有办法像普通 map 一样遍历所有键值对
  • 在高并发写入场景下,性能不如分片 map

分片 map 的原理与优势

所谓分片 map,就是把一个大 map 拆成多个小 map,每个小 map 独立加锁。这样做的好处是降低锁粒度,提升并发能力

实现思路一般是这样的:

Colly Golang Web Scraper and Crawler Framework
Colly Golang Web Scraper and Crawler Framework

Colly 是一个用于 Go 语言的快速开源爬取和爬虫框架。它适用于从简单的页面提取到异步爬虫处理大量页面集合,支持请求回调和结构化解析。

下载
  • 使用一个固定数量的桶(比如 16 或 32)
  • 每个桶是一个带锁的普通 map
  • 插入或查询时,先根据 key 计算 hash,然后模运算决定落在哪个桶
  • 各个桶之间互不影响,锁只作用于当前桶

举个简单例子:假设你有 16 个桶,当两个协程同时操作不同的 key,如果这两个 key 分别落在不同桶里,它们就可以并行执行,而不会互相阻塞。

这种结构在以下情况下更有优势:

  • 高频写入/更新的场景
  • 数据分布比较均匀(避免某些桶负载过高)
  • 需要完整 map 操作(如遍历)

性能对比与选型建议

从实际测试来看,在读写混合或写多读少的情况下,分片 map 往往比 sync.Map 更快;而在读多写少且 key 固定不变的场景下,sync.Map 表现更稳定。

你可以参考以下几个维度做选择:

  • 业务场景

    • 如果你的 map 主要是缓存、配置等静态数据,优先考虑 sync.Map
    • 如果是高频写入的计数器、状态记录等,建议用分片 map
  • 是否需要遍历

    • sync.Map 不支持直接 range,只能通过 Load/Range 函数模拟
    • 分片 map 可以轻松实现全局遍历
  • 内存占用与扩容成本

    • sync.Map 内部结构复杂,可能占用更多内存
    • 分片 map 可控性更强,可以按需调整桶数量

小技巧:如何设计分片 map?

如果你想自己实现一个简单的分片 map,可以按照这个结构来:

type ShardedMap struct {
    shards  []*sync.Map
    mask    uint32 // 用于快速取模,通常是 shardCount - 1
}

func (sm *ShardedMap) getShard(key string) *sync.Map {
    h := fnv.New32()
    h.Write([]byte(key))
    return sm.shards[h.Sum32() & sm.mask]
}

几点注意:

  • 分片数量最好是 2 的幂,方便位运算替代取模
  • key 的哈希函数要尽量均匀分布,避免热点桶
  • 每个桶使用 sync.Map 或带锁的普通 map 都可以,看具体需求

基本上就这些。两种方案各有适用场景,没有绝对的好坏。理解清楚自己的业务模式,再做选择会更稳妥。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

479

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

576

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

956

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

751

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1406

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

3894

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

1734

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

3706

2025.06.17

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

0

2026.09.23

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn