讲师中心 微信公众号
AI工具推荐 视频效率加速

Go语言实现基于LRU-K的缓存淘汰算法:语言学习中的数据结构进阶

云辰大大_1792

云辰大大_1792

发布时间:2026-07-17 13:17:01

|

606人浏览过

|

来源于php中文网

原创

container/list + map 无法直接复用为 LRU-K,因其仅支持单次访问记录,缺少历史队列和访问计数器;混用会导致晋升逻辑错乱、计数不同步及并发竞态,必须拆分为两个隔离链表+两套map并分层加锁。

go语言实现基于lru-k的缓存淘汰算法:语言学习中的数据结构进阶

为什么 container/list + map 无法直接复用为 LRU-K

标准库的 container/list 和 map 组合能高效实现 LRU-1,但直接套用到 LRU-K 会失效——因为 LRU-K 要求每个 key 至少被访问 K 次才晋升进主缓存,而标准双链表结构里没有“历史队列”和“访问计数器”这两个关键组件。

常见错误现象包括:

  • Get 一次就命中,实际应至少访问 K 次才进主缓存
  • 历史队列满后未淘汰最老 entry,导致 cnt 膨胀、内存泄漏
  • cnt 和 historyCache.mp 不同步:key 在 history 队列里,但计数已丢失或未更新

必须拆成两个物理隔离的链表 + 两套 map

LRU-K 的核心是双层结构:一层主缓存(LRU 行为),一层历史队列(FIFO 行为)。混用会导致晋升逻辑错乱,比如刚访问第 1 次就进了主链表头,后续根本无法判断是否达 K 次。

正确组织方式如下:

立即学习“go语言免费学习笔记(深入)”;

Go语言(Golang)1.26.0
Go语言(Golang)1.26.0

Go语言(Golang)1.26.0版本官方下载,版本号 1.26.0,适合旧项目维护、兼容性测试和指定版本开发环境搭建。

下载
  • 主缓存:ll *list.List + mp map[string]*list.Element,行为同标准 LRU:命中则 MoveToFront,满则 RemoveOldest
  • 历史队列:historyCache.ll *list.List + historyCache.mp map[string]*list.Element + historyCache.cnt map[string]int,仅用于计数,不存 value
  • 晋升逻辑放在 Get:若 historyCache.cnt[key] >= K,则从 history 队列中 Remove 该节点,并调用 Put(key, value) 进主缓存(注意:value 需业务层提供或提前缓存)
  • historyCache.ll 是 FIFO,淘汰用 Front(),不是 Back();它只管“谁先进来”,不管“谁最近用”

淘汰时如何高效选出「第 K 次访问最久」的 key

不能每次淘汰都遍历全量 keys 并计算每个的 history[0](O(N) 太重)。正确做法是维护一个最小堆(min-heap),堆元素是 {key string, kthTime time.Time},按 kthTime 排序。

关键细节:

  • 每次 key 历史更新后,把新 kthTime 推入堆 —— 注意堆里可能有多个同 key 的过期条目,所以要用「懒删除」
  • 淘汰时 Pop 出堆顶,检查其 kthTime 是否与当前 key 的 history[0] 一致,不一致就丢弃并继续 Pop
  • Go 标准库 container/heap 要求实现 heap.Interface,重点写好 Less(i, j int) bool 和 Swap、Push、Pop
  • 每个 key 对应的访问历史建议用 type accessHistory []time.Time 升序存储(history[0] 是第 K 次访问时间),插入时 append(history, now) 再截断头部:if len(history) > K { history = history[1:] }

并发安全下锁怎么分层才不卡 Get

LRU-K 比纯 LRU 多一层 history 访问,锁粒度更敏感。一把全局 sync.Mutex 会让所有 Get 阻塞,尤其未命中路径要查主缓存 → 查 history → 更新计数 → 判晋升 → 可能 Put,全程串行。

推荐分层加锁策略:

  • 主缓存读(Get 命中路径):用 sync.RWMutex.RLock(),只保护 mp 查找和 ll.MoveToFront()
  • 主缓存写(Put / RemoveOldest):升级为 Lock(),但临界区只做链表指针重连 + mp 增删,绝不含 value 序列化、日志、回调
  • history 部分:单独一把 sync.RWMutex(如叫 historyMu),因为它的读写频率和主缓存不一致;Get 未命中时先 historyMu.RLock() 查 cnt,再 Lock() 更新计数或移出队列
  • 切忌在 Get 中先 Unlock() 主锁再去处理 history —— 这会导致竞态:A goroutine 刚查完主缓存未命中,正准备去 history 查,B goroutine 此时 Put 同 key 进主缓存,A 就会重复晋升
真正容易被忽略的是历史队列与主缓存之间的“晋升时机”和“value 来源”。LRU-K 不是自动把历史访问过的 key 拉进主缓存,而是需要你在 Get 未命中且满足 cnt[key] >= K 时,显式触发一次 Put(key, value)——这个 value 必须由上层业务提供,或者你得提前缓存好原始数据源,否则晋升会失败。

热门AI工具

更多
超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

相关专题

更多
treenode的用法
treenode的用法

​在计算机编程领域,TreeNode是一种常见的数据结构,通常用于构建树形结构。在不同的编程语言中,TreeNode可能有不同的实现方式和用法,通常用于表示树的节点信息。更多关于treenode相关问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2561

2023.12.01

C++ 高效算法与数据结构
C++ 高效算法与数据结构

本专题讲解 C++ 中常用算法与数据结构的实现与优化,涵盖排序算法(快速排序、归并排序)、查找算法、图算法、动态规划、贪心算法等,并结合实际案例分析如何选择最优算法来提高程序效率。通过深入理解数据结构(链表、树、堆、哈希表等),帮助开发者提升 在复杂应用中的算法设计与性能优化能力。

356

2025.12.22

深入理解算法:高效算法与数据结构专题
深入理解算法:高效算法与数据结构专题

本专题专注于算法与数据结构的核心概念,适合想深入理解并提升编程能力的开发者。专题内容包括常见数据结构的实现与应用,如数组、链表、栈、队列、哈希表、树、图等;以及高效的排序算法、搜索算法、动态规划等经典算法。通过详细的讲解与复杂度分析,帮助开发者不仅能熟练运用这些基础知识,还能在实际编程中优化性能,提高代码的执行效率。本专题适合准备面试的开发者,也适合希望提高算法思维的编程爱好者。

397

2026.01.06

C++ 数据结构与算法实现教程合集
C++ 数据结构与算法实现教程合集

以 C++ 为实现语言,系统讲解核心数据结构与算法,涵盖链表(单链表/双链表/环检测)、栈与队列(单调栈/优先队列)、二叉树(遍历/BST/AVL/红黑树)、哈希表(开地址法/链地址法)、图(邻接表/BFS/DFS/Dijkstra/拓扑排序)、常见排序算法(快排/归并/堆排/计数排序)的实现与复杂度分析,同时分享 LeetCode 刷题技巧、竞赛编程常用模板(二分/前缀和/滑动窗口/动态规划),帮助开发者夯实算法基础。

452

2026.05.09

Go中Type关键字的用法
Go中Type关键字的用法

Go中Type关键字的用法有定义新的类型别名或者创建新的结构体类型。本专题为大家提供Go相关的文章、下载、课程内容,供大家免费下载体验。

2929

2023.09.06

go怎么实现链表
go怎么实现链表

go通过定义一个节点结构体、定义一个链表结构体、定义一些方法来操作链表、实现一个方法来删除链表中的一个节点和实现一个方法来打印链表中的所有节点的方法实现链表。

5847

2023.09.25

go语言编程软件有哪些
go语言编程软件有哪些

go语言编程软件有Go编译器、Go开发环境、Go包管理器、Go测试框架、Go文档生成器、Go代码质量工具和Go性能分析工具等。本专题为大家提供go语言相关的文章、下载、课程内容,供大家免费下载体验。

702

2023.10.13

0基础如何学go语言
0基础如何学go语言

0基础学习Go语言需要分阶段进行,从基础知识到实践项目,逐步深入。php中文网给大家带来了go语言相关的教程以及文章,欢迎大家前来学习。

7605

2023.10.26

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn