双向链表与LRU缓存淘汰机制

栏目: 数据库 · 发布时间: 7年前

内容简介:双向链表作为在日常开发中最常用的数据结构之一,应用十分广泛,在诸多著名开源项目中如redis的list结构, groupcache的lru中均是核心实现。在设计此类数据集合的时候,外面看上去链表似乎与数组相似,但链表是一个非连续性内存的存储方案,提供了高效的节点重排能力与顺序访问方式,对比与操作数组,只需知道给定项的地址和位置的链接就能在内存中找到它,并且可以通过增减节点的方式来灵活的调整长度。反而数组,比如插入一个新的元素,那么该位置后的元素都要往后移动一位。其结构如图

双向链表

双向链表作为在日常开发中最常用的数据结构之一,应用十分广泛,在诸多著名开源项目中如 redis 的list结构, groupcache的lru中均是核心实现。在设计此类数据集合的时候,外面看上去链表似乎与数组相似,但链表是一个非连续性内存的存储方案,提供了高效的节点重排能力与顺序访问方式,对比与操作数组,只需知道给定项的地址和位置的链接就能在内存中找到它,并且可以通过增减节点的方式来灵活的调整长度。反而数组,比如插入一个新的元素,那么该位置后的元素都要往后移动一位。

标准的双向链表实现

其结构如图

双向链表与LRU缓存淘汰机制

在双向链表中头结点的前指针为空,尾节点的后指针为空, 对头尾的操作十分简单, 插入头节点只需要将新节点的next设置为当前链表的头节点, 当前列表的prev为新节点, 并与之交换位置即可, 插入尾部反之

双向链表与LRU缓存淘汰机制

在节点中间按游标插入的话则需要考虑正向反向的问题, 下图当i 为正数表示正向插入,负数反向插入, 其实不管是只操作头尾节点还是中间节点,其核心就是交换当前节点与前一个和后一个节点之间的链接

双向链表与LRU缓存淘汰机制

将某个节点移动至头部跟插入头部动作多了一步交换当前节点前后节点链接的操作

双向链表与LRU缓存淘汰机制

而删除某个节点就只需要将其前后节点的链接互相相连,使其不被引用,它会自动被回收掉

双向链表与LRU缓存淘汰机制

LRU

LRU全称Least Recently Used, 直译为“最近最少使用”, 其对于内存管理方面十分有效,比如容量只有十的一个集合,当写入第十一条数据时候,最少使用的那个数据将会被淘汰,故此方法很适用于对有给定容量限制的热数据做缓存管理

在开源项目 groupcache 中, 缓存的过期没有设置过期时间而是依赖于LRU淘汰机制,那么其用来实现LRU的核心就是一个双向链表, 为了保证效率, 缓存数据被保存在一个Map中使每次缓存的存取时间复杂度为O(1), 而双向链表则负责管理内存的容量以及实现淘汰机制

双向链表与LRU缓存淘汰机制

在写入新的缓存项时,会把其插入至链表的头部, 并且判断如果当前链表长度大于给定长度时,删除链表尾部的元素,同时删除其在map中的key

双向链表与LRU缓存淘汰机制

每当有访问命中缓存时, 会将命中的缓存移至链表头部

双向链表与LRU缓存淘汰机制

上述插入和命中时将其放到链表头部的策略,使得链表尾部的元素永远是使用得最少的那个缓存,故新缓存进来时就将其淘汰。

本文说明了双向链表的实现以及其实际应用,但是在真实应用中,golang 的双向链表是非线程安全的,如遇到并发情况操作链表则会因为找不到地址而报错, 所以groupcache项目在从LRU策略中获取缓存的时候,在外部包了一个带读写锁的结构体来保证其并发安全

双向链表与LRU缓存淘汰机制


以上所述就是小编给大家介绍的《双向链表与LRU缓存淘汰机制》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

编码的奥秘

编码的奥秘

Charles Petzold / 伍卫国、王宣政、孙燕妮 / 机械工业出版社 / 2000-9-1 / 24.00

渴望交流是大多数人的天性。在本书中,“编码”通常指一种在人和机器之间进行信息转换的系统。换句话说、编码即是交流。有时我们将编码看得很神秘,其实大多数编码并非都是这样。大多数的编码都需要被很好地理解,因为它们是人类交流的基础。――《编码的奥秘》 手电筒、英国人入侵、黑色的猫和跷跷板与计算机有什么必然联系?本书向我们展示了使用语言的一些直观方法并创造新的方法来进行相互之间的交流。此书使我们明白了......一起来看看 《编码的奥秘》 这本书的介绍吧!

HTML 压缩/解压工具
HTML 压缩/解压工具

在线压缩/解压 HTML 代码

在线进制转换器
在线进制转换器

各进制数互转换器

正则表达式在线测试
正则表达式在线测试

正则表达式在线测试