0

0

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

P粉602998670

P粉602998670

发布时间:2025-07-21 09:47:01

|

622人浏览过

|

来源于php中文网

原创

go语言中并发安全的map实现有sync.map和分片map。sync.map适合读多写少、key基本固定的场景,如缓存系统和元数据管理;其优点是无需加锁、读取高效,缺点是频繁更新性能差、不支持遍历。分片map通过拆分map并独立加锁,降低锁粒度,适用于高频写入、需遍历及数据分布均匀的场景;其实现步骤包括:1.设置固定数量桶;2.每个桶使用独立锁;3.根据key哈希确定所属桶;4.各桶操作互不影响。性能对比上,读写混合或写多读少时分片map更优,而读多写少且key固定时sync.map表现更好。选型建议:1.优先考虑业务场景,静态数据用sync.map,动态数据用分片map;2.sync.map不支持直接range,分片map可轻松遍历;3.sync.map内存占用高,分片map可控性强。实现分片map时注意:1.分片数为2的幂;2.哈希函数分布均匀;3.每个桶可用sync.map或带锁map。两种方案各有优势,应根据实际需求选择。

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

Go语言中,map本身不是并发安全的,所以在多协程环境下使用时必须加锁。为了提高性能,官方在1.9版本引入了 sync.Map,它适用于某些特定场景下的读写操作。但除此之外,还有一种常见做法是“分片 map(Sharded Map)”,通过将数据分散到多个桶中减少锁竞争。

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

如果你在寻找一种更适合你项目的并发安全 map 实现方式,这里是一些实用建议和对比分析。


sync.Map 适合什么场景?

sync.Map 是 Go 标准库提供的一个并发安全 map 实现,内部结构优化过,对于读多写少、key 基本固定的场景表现很好。

立即学习go语言免费学习笔记(深入)”;

Golang如何提升并发安全map性能 对比sync.Map与分片map实现

比如:

  • 缓存系统中存储一些不常变的配置项
  • 元数据管理,例如记录请求路径访问次数

它的特点是:

Golang如何提升并发安全map性能 对比sync.Map与分片map实现
  • 不需要额外加锁
  • 内部用原子操作和双 slot 结构来优化读取
  • 一旦某个 key 被频繁读取,后续读操作几乎无锁开销

但缺点也很明显:

  • 如果频繁更新或删除 key,性能会下降
  • 没有办法像普通 map 一样遍历所有键值对
  • 在高并发写入场景下,性能不如分片 map

分片 map 的原理与优势

所谓分片 map,就是把一个大 map 拆成多个小 map,每个小 map 独立加锁。这样做的好处是降低锁粒度,提升并发能力

实现思路一般是这样的:

  • 使用一个固定数量的桶(比如 16 或 32)
  • 每个桶是一个带锁的普通 map
  • 插入或查询时,先根据 key 计算 hash,然后模运算决定落在哪个桶
  • 各个桶之间互不影响,锁只作用于当前桶

举个简单例子:假设你有 16 个桶,当两个协程同时操作不同的 key,如果这两个 key 分别落在不同桶里,它们就可以并行执行,而不会互相阻塞。

OmniAudio
OmniAudio

OmniAudio 是一款通过 AI 支持将网页、Word 文档、Gmail 内容、文本片段、视频音频文件都转换为音频播客,并生成可在常见 Podcast ap

下载

这种结构在以下情况下更有优势:

  • 高频写入/更新的场景
  • 数据分布比较均匀(避免某些桶负载过高)
  • 需要完整 map 操作(如遍历)

性能对比与选型建议

从实际测试来看,在读写混合或写多读少的情况下,分片 map 往往比 sync.Map 更快;而在读多写少且 key 固定不变的场景下,sync.Map 表现更稳定。

你可以参考以下几个维度做选择:

  • 业务场景

    • 如果你的 map 主要是缓存、配置等静态数据,优先考虑 sync.Map
    • 如果是高频写入的计数器、状态记录等,建议用分片 map
  • 是否需要遍历

    • sync.Map 不支持直接 range,只能通过 Load/Range 函数模拟
    • 分片 map 可以轻松实现全局遍历
  • 内存占用与扩容成本

    • sync.Map 内部结构复杂,可能占用更多内存
    • 分片 map 可控性更强,可以按需调整桶数量

小技巧:如何设计分片 map?

如果你想自己实现一个简单的分片 map,可以按照这个结构来:

type ShardedMap struct {
    shards  []*sync.Map
    mask    uint32 // 用于快速取模,通常是 shardCount - 1
}

func (sm *ShardedMap) getShard(key string) *sync.Map {
    h := fnv.New32()
    h.Write([]byte(key))
    return sm.shards[h.Sum32() & sm.mask]
}

几点注意:

  • 分片数量最好是 2 的幂,方便位运算替代取模
  • key 的哈希函数要尽量均匀分布,避免热点
  • 每个桶使用 sync.Map 或带锁的普通 map 都可以,看具体需求

基本上就这些。两种方案各有适用场景,没有绝对的好坏。理解清楚自己的业务模式,再做选择会更稳妥。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

211

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

247

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

356

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

214

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

410

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

490

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

201

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

1499

2025.06.17

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

69

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
golang socket 编程
golang socket 编程

共2课时 | 0.1万人学习

nginx浅谈
nginx浅谈

共15课时 | 0.9万人学习

golang和swoole核心底层分析
golang和swoole核心底层分析

共3课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号