0

0

如何在Golang中实现一个LRU缓存淘汰算法 Go语言数据结构实战

P粉602998670

P粉602998670

发布时间:2026-03-12 14:29:31

|

161人浏览过

|

来源于php中文网

原创

手写lru缓存因轻量精准可控:避免第三方包冗余功能与过粗锁粒度,用map+自定义双向链表优化性能,需原子更新访问顺序、正确处理并发、边界值及指针重连。

如何在golang中实现一个lru缓存淘汰算法 go语言数据结构实战

为什么不用第三方包而要手写 LRU 缓存

因为多数场景下你真正需要的只是一个带容量限制、能按访问顺序淘汰的老化容器,而不是带分布式、持久化、统计埋点的“企业级缓存”。手写 LRU 能精确控制行为:比如是否允许 nil 值、键比较方式、并发安全粒度、是否在 Get 时更新顺序。第三方包(如 github.com/hashicorp/golang-lru)默认做线程安全,但锁粒度可能比你需要的粗,反而拖慢高频单 goroutine 场景。

  • sync.Map 不适合直接改造成 LRU——它不维护访问顺序,也无法按需驱逐
  • list.List + map[interface{}]*list.Element 是标准解法,但要注意 list.Element.Valueinterface{},类型擦除会带来运行时断言开销
  • 如果键是字符串且值是固定结构体,用 map[string]*entry + 自定义双向链表节点(避免接口转换)性能更好

GetPut 必须原子更新访问顺序

常见错误是把“查 map”和“挪到链表头”拆成两步,中间被其他 goroutine 干扰,导致顺序错乱或 panic。正确做法是在同一临界区内完成查找、移动、返回三件事。如果你加了读写锁(sync.RWMutex),Get 用读锁不够——因为要修改链表结构,必须用写锁;或者改用单个 sync.Mutex 更稳妥。

  • 不要在 Get 中先 deletePut——这会触发两次哈希计算和内存分配
  • 移动节点时别只改 next/prev,还要确保原位置的前后节点正确重连,否则链表断裂后 Remove 会 panic
  • 当缓存满时,Put 要先从链表尾删节点,再从 map 删除对应键,顺序不能反,否则删完 map 后链表节点还挂着脏引用

如何安全支持并发读写

最简方案是整个结构体配一个 sync.Mutex,对绝大多数中小流量服务够用。别过早优化成读写分离——因为 Get 实际要写链表,所谓“读多写少”在这里不成立。如果你真遇到锁瓶颈,优先考虑分片(shard):把一个大缓存拆成多个小缓存(比如 32 个),用键哈希路由,每个配独立锁。这时注意分片数别设成 2 的幂次(如 16、32),避免哈希碰撞集中;推荐用质数(如 37)。

百宝箱
百宝箱

百宝箱是支付宝推出的一站式AI原生应用开发平台,无需任何代码基础,只需三步即可完成AI应用的创建与发布。

下载
  • 不要用 sync/atomic 操作指针来绕过锁——list.Element 的字段不是原子可读写的,会导致数据竞争
  • 测试并发安全不能只靠压测,要跑 go test -race,尤其关注 map 读写和 list 结构修改是否在同一锁保护下
  • 如果业务允许“短暂不一致”,比如容忍几毫秒内旧值未被移到头部,可用 sync.Pool 缓存链表节点减少 GC,但别缓存用户数据本身

边界情况比想象中多:空值、重复键、零容量

很多人忽略 Put("k", nil) 该怎么处理。Go 的 map 允许 nil 值,但 list.ListPushFront(nil) 是合法的,而后续 Get 返回 nil 时你无法区分是“没命中”还是“命中但存的是 nil”。建议统一禁止 nil 值,或在 entry 结构体里加 valid bool 字段显式标记。

立即学习go语言免费学习笔记(深入)”;

  • 容量为 0 时,Put 应直接丢弃,Get 永远返回未命中——但别 panic,这是合法配置(用于临时关闭缓存)
  • 键类型如果是结构体,确保实现了可比性(字段都可比较),否则 map 操作会编译失败;若不可比(含 slice/map/func),得自己实现哈希和等价函数
  • 测试时一定要覆盖 “Put 超限 → Get 最老项 → Put 新项 → 再 Get 最老项” 这条路径,容易漏掉尾节点未正确更新 prev 导致循环引用

最难调的永远不是主干逻辑,而是删节点时对前后指针的四行更新代码——少一行或顺序错,缓存就悄悄开始返回错误结果,日志还完全看不出问题。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

210

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

247

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

356

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

214

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

409

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

490

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

201

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

1458

2025.06.17

C# ASP.NET Core微服务架构与API网关实践
C# ASP.NET Core微服务架构与API网关实践

本专题围绕 C# 在现代后端架构中的微服务实践展开,系统讲解基于 ASP.NET Core 构建可扩展服务体系的核心方法。内容涵盖服务拆分策略、RESTful API 设计、服务间通信、API 网关统一入口管理以及服务治理机制。通过真实项目案例,帮助开发者掌握构建高可用微服务系统的关键技术,提高系统的可扩展性与维护效率。

76

2026.03.11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go 教程
Go 教程

共32课时 | 6.1万人学习

Go语言实战之 GraphQL
Go语言实战之 GraphQL

共10课时 | 0.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号