0

0

Go语言如何实现并发缓存_Golang并发缓存设计

P粉602998670

P粉602998670

发布时间:2026-02-12 14:21:13

|

256人浏览过

|

来源于php中文网

原创

go原生map非并发安全,多goroutine读写会崩溃;sync.map适用读多写少场景,但api差异大;推荐分片rwmutex+map实现可控缓存,并配合singleflight防击穿,过期策略优先惰性删除+容量限制。

go语言如何实现并发缓存_golang并发缓存设计

为什么直接用 map 做并发缓存会 panic

Go 的原生 map 不是并发安全的,多个 goroutine 同时读写(哪怕只是写+读)会触发 fatal error: concurrent map read and map write。这不是偶发 bug,而是运行时强制崩溃——Go 故意这么设计,避免隐藏的数据竞争。

常见误用场景:sync.Map 被当成“万能替代品”直接套用,但它的 API 和语义和普通 map 差异很大,比如不支持遍历、没有 len()LoadOrStore 返回值含义容易误解。

  • 不要在热路径上频繁调用 sync.Map.Load + sync.Map.Store 拆开写,这会多一次哈希查找
  • 如果需要原子性地“查不到就建”,必须用 LoadOrStore,而不是先 Load 再判断再 Store
  • sync.Map 适合读多写少、键生命周期长的场景;若写频次高或需精确控制淘汰策略,它反而不如带锁的普通 map

RWMutex + map 实现可控缓存

对大多数业务缓存来说,加读写锁比依赖 sync.Map 更直观、更易调试、性能也不差——尤其当 value 是指针或小结构体时,锁粒度合理的情况下,RWMutex 的读并发效率接近无锁。

关键点不在“能不能并发”,而在“怎么避免锁住整个 map”。典型做法是分片(sharding):

立即学习go语言免费学习笔记(深入)”;

  • 把 key 哈希后模一个固定数(如 32),映射到多个 map + RWMutex 组合上
  • 读操作只锁对应分片,不同分片完全无竞争
  • 写操作也只锁单个分片,不会阻塞其他 key 的读写
  • 分片数不宜过大(增加内存/哈希开销),也不宜过小(热点 key 导致锁争用)

示例片段:

SUN2008 企业网站管理系统2.0 beta
SUN2008 企业网站管理系统2.0 beta

1、数据调用该功能使界面与程序分离实施变得更加容易,美工无需任何编程基础即可完成数据调用操作。2、交互设计该功能可以方便的为栏目提供个性化性息功能及交互功能,为产品栏目添加产品颜色尺寸等属性或简单的留言和订单功能无需另外开发模块。3、静态生成触发式静态生成。4、友好URL设置网页路径变得更加友好5、多语言设计1)UTF8国际编码; 2)理论上可以承担一个任意多语言的网站版本。6、缓存机制减轻服务器

下载
type ShardedCache struct {
    shards [32]struct {
        mu sync.RWMutex
        m  map[string]interface{}
    }
}

func (c *ShardedCache) Get(key string) (interface{}, bool) {
    shard := &c.shards[uint32(hash(key))%32]
    shard.mu.RLock()
    v, ok := shard.m[key]
    shard.mu.RUnlock()
    return v, ok
}

singleflight 解决缓存击穿问题

缓存未命中时,如果大量请求同时去查后端(DB/HTTP),会造成雪崩。仅靠加锁不够——锁只能串行化请求,但没解决“重复加载同一 key”的本质问题。

golang.org/x/sync/singleflight 提供了“飞行中请求去重”能力:第一次请求触发加载,后续同 key 请求等待其结果,而非各自发起后端调用。

  • 必须和缓存层配合使用:先查缓存 → 未命中 → 用 Group.Do 加载 → 成功后写入缓存
  • Do 的回调函数里不能直接调用缓存 Set,否则可能造成递归或竞态;应由外层统一写入
  • 注意 Do 返回的 error 是加载过程的 error,不是缓存操作的 error

典型组合逻辑:

v, err := cache.Get(key)
if v != nil {
    return v, nil
}
v, err, _ = group.Do(key, func() (interface{}, error) {
    res, e := loadFromDB(key) // 真实加载逻辑
    if e == nil {
        cache.Set(key, res) // 这里写入缓存
    }
    return res, e
})

过期时间与内存回收的实际取舍

Go 没有内置 TTL 支持,所有“带过期的缓存”都得自己实现。常见方案有三种,没有银弹:

  • 惰性删除(Lazy expiration):每次 Get 时检查时间戳,过期则丢弃并返回未命中。简单,但过期 key 会一直占内存
  • 定期清理(Periodic cleanup):启一个 goroutine,定时遍历 map 删除过期项。遍历大 map 会卡顿,且无法保证及时性
  • 写时驱逐(Write-time eviction):在 Set 时检查容量,超限时按 LRU/LFU 清理。需要额外数据结构(如双向链表+map),增加复杂度

生产环境建议:优先用惰性删除 + 容量限制(如最大条目数)。真正需要精确过期语义的场景,往往该交给 Redis 这类专业组件,而不是在 Go 进程内硬扛。

最容易被忽略的一点:无论选哪种策略,都要暴露指标(如当前 size、命中率、过期数),否则缓存行为完全不可观测。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

206

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

235

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

346

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

212

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

402

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

322

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

197

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

784

2025.06.17

2026春节习俗大全
2026春节习俗大全

本专题整合了2026春节习俗大全,阅读专题下面的文章了解更多详细内容。

189

2026.02.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 5万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号