当前位置:   article > 正文

LFU算法详解

lfu算法

LFU算法:least frequently used,最近最不经常使用算法

对于每个条目,维护其使用次数 cnt最近使用时间 time

cache容量为 n,即最多存储n个条目。

那么当我需要插入新条目并且cache已经满了的时候,需要删除一个之前的条目。删除的策略是:优先删除使用次数cnt最小的那个条目,因为它最近最不经常使用,所以删除它。如果使用次数cnt最小值为min_cnt,这个min_cnt对应的条目有多个,那么在这些条目中删除最近使用时间time最早的那个条目(举个栗子:a资源和b资源都使用了两次,但a资源在5s的时候最后一次使用,b资源在7s的时候最后一次使用,那么删除a,因为b资源更晚被使用,所以b资源相比a资源来说,更有理由继续被使用,即时间局部性原理)。

类似lru算法的想法,利用哈希表+链表

链表是负责按时间先后排序的。哈希表是负责O(1)时间查找key对应节点的。

引用力扣的一张图片

 lfu算法是按照两个维度引用计数最近使用时间来排序的。所以一个链表肯定不够用了。解决办法就是按照下图这样,使用第二个哈希表,key是引用计数,value是一个链表,存储使用次数为当前key的所有节点。该链表中的所有节点按照最近使用时间排序,最近使用的在链表头部,最晚使用的在尾部。这样我们可以完成O(1)时间查找key对应节点(通过第一个哈希表);O(1)时间删除、更改某节点(通过第二个哈希表)。

注意:get(查询)操作和put(插入)操作都算“使用”,都会增加引用计数。

所以get(key)操作实现思路:如果第一个哈希表中能查到key,那么取得相应链表节点。接下来在第二个哈希表中,把它移到其引用计数+1位置的链表头部,并删除之前的节点

put(key,value)操作实现思路:如果第一个哈希表中能查找key,那么操作和get(key)一样,只是把新节点的value置为新value。

如果查不到key,那么我们有可能需要删除cache中的某一项(容量已经达到限制):直接找到第二个哈希表中最小引用计数的链表,删除其末尾节点(最晚使用),之后再添加新节点即可

注意点:

1.容量超限需要删除节点时,删除了第二个哈希表中的项的同时,第一个哈希表中对应的映射也应该删掉。

2.需要保持一个min_cnt整型变量用来保存当前的最小引用计数因为容量超限需要删除节点时,我们需要O(1)时间找到需要删除的节点。

实现代码:
 

  1. import java.util.HashMap;
  2. import java.util.Map;
  3. public class LFUCache {
  4. /**
  5. * key 就是题目中的 key
  6. * value 是结点类
  7. */
  8. private Map<Integer, ListNode> map;
  9. /**
  10. * 访问次数哈希表,使用 ListNode[] 也可以,不过要占用很多空间
  11. */
  12. private Map<Integer, DoubleLinkedList> frequentMap;
  13. /**
  14. * 外部传入的容量大小
  15. */
  16. private Integer capacity;
  17. /**
  18. * 全局最高访问次数,删除最少使用访问次数的结点时会用到
  19. */
  20. private Integer minFrequent = 1;
  21. public LFUCache(int capacity) {
  22. // 显式设置哈希表的长度 = capacity 和加载因子 = 1 是为了防止哈希表扩容带来的性能消耗
  23. // 这一步操作在理论上的可行之处待讨论,实验下来效果是比较好的
  24. map = new HashMap<>(capacity, 1);
  25. frequentMap = new HashMap<>();
  26. this.capacity = capacity;
  27. }
  28. /**
  29. * get 一次操作,访问次数就增加 1;
  30. * 从原来的链表调整到访问次数更高的链表的表头
  31. *
  32. * @param key
  33. * @return
  34. */
  35. public int get(int key) {
  36. // 测试测出来的,capacity 可能传 0
  37. if (capacity == 0) {
  38. return -1;
  39. }
  40. if (map.containsKey(key)) {
  41. // 获得结点类
  42. ListNode listNode = removeListNode(key);
  43. // 挂接到新的访问次数的双向链表的头部
  44. int frequent = listNode.frequent;
  45. addListNode2Head(frequent, listNode);
  46. return listNode.value;
  47. } else {
  48. return -1;
  49. }
  50. }
  51. /**
  52. * @param key
  53. * @param value
  54. */
  55. public void put(int key, int value) {
  56. if (capacity == 0) {
  57. return;
  58. }
  59. // 如果 key 存在,就更新访问次数 + 1,更新值
  60. if (map.containsKey(key)) {
  61. ListNode listNode = removeListNode(key);
  62. // 更新 value
  63. listNode.value = value;
  64. int frequent = listNode.frequent;
  65. addListNode2Head(frequent, listNode);
  66. return;
  67. }
  68. // 如果 key 不存在
  69. // 1、如果满了,先删除访问次数最小的的末尾结点,再删除 map 里对应的 key
  70. if (map.size() == capacity) {
  71. // 1、从双链表里删除结点
  72. DoubleLinkedList doubleLinkedList = frequentMap.get(minFrequent);
  73. ListNode removeNode = doubleLinkedList.removeTail();
  74. // 2、删除 map 里对应的 key
  75. map.remove(removeNode.key);
  76. }
  77. // 2、再创建新结点放在访问次数为 1 的双向链表的前面
  78. ListNode newListNode = new ListNode(key, value);
  79. addListNode2Head(1, newListNode);
  80. map.put(key, newListNode);
  81. // 【注意】因为这个结点是刚刚创建的,最少访问次数一定为 1
  82. this.minFrequent = 1;
  83. }
  84. // 以下部分主要是结点类和双向链表的操作
  85. /**
  86. * 结点类,是双向链表的组成部分
  87. */
  88. private class ListNode {
  89. private int key;
  90. private int value;
  91. private int frequent = 1;
  92. private ListNode pre;
  93. private ListNode next;
  94. public ListNode() {
  95. }
  96. public ListNode(int key, int value) {
  97. this.key = key;
  98. this.value = value;
  99. }
  100. }
  101. /**
  102. * 双向链表
  103. */
  104. private class DoubleLinkedList {
  105. /**
  106. * 虚拟头结点,它无前驱结点
  107. */
  108. private ListNode dummyHead;
  109. /**
  110. * 虚拟尾结点,它无后继结点
  111. */
  112. private ListNode dummyTail;
  113. /**
  114. * 当前双向链表的有效结点数
  115. */
  116. private int count;
  117. public DoubleLinkedList() {
  118. // 虚拟头尾结点赋值多少无所谓
  119. this.dummyHead = new ListNode(-1, -1);
  120. this.dummyTail = new ListNode(-2, -2);
  121. dummyHead.next = dummyTail;
  122. dummyTail.pre = dummyHead;
  123. count = 0;
  124. }
  125. /**
  126. * 把一个结点类添加到双向链表的开头(头部是最新使用数据)
  127. *
  128. * @param addNode
  129. */
  130. public void addNode2Head(ListNode addNode) {
  131. ListNode oldHead = dummyHead.next;
  132. // 两侧结点指向它
  133. dummyHead.next = addNode;
  134. oldHead.pre = addNode;
  135. // 它的前驱和后继指向两侧结点
  136. addNode.pre = dummyHead;
  137. addNode.next = oldHead;
  138. count++;
  139. }
  140. /**
  141. * 把双向链表的末尾结点删除(尾部是最旧的数据,在缓存满的时候淘汰)
  142. *
  143. * @return
  144. */
  145. public ListNode removeTail() {
  146. ListNode oldTail = dummyTail.pre;
  147. ListNode newTail = oldTail.pre;
  148. // 两侧结点建立连接
  149. newTail.next = dummyTail;
  150. dummyTail.pre = newTail;
  151. // 它的两个属性切断连接
  152. oldTail.pre = null;
  153. oldTail.next = null;
  154. // 重要:删除一个结点,当前双向链表的结点个数少 1
  155. count--;
  156. // 维护
  157. return oldTail;
  158. }
  159. }
  160. /**
  161. * 将原来访问次数的结点,从双向链表里脱离出来
  162. *
  163. * @param key
  164. * @return
  165. */
  166. private ListNode removeListNode(int key) {
  167. // 获得结点类
  168. ListNode deleteNode = map.get(key);
  169. ListNode preNode = deleteNode.pre;
  170. ListNode nextNode = deleteNode.next;
  171. // 两侧结点建立连接
  172. preNode.next = nextNode;
  173. nextNode.pre = preNode;
  174. // 删除去原来两侧结点的连接
  175. deleteNode.pre = null;
  176. deleteNode.next = null;
  177. // 维护双链表结点数
  178. frequentMap.get(deleteNode.frequent).count--;
  179. // 【注意】维护 minFrequent
  180. // 如果当前结点正好在最小访问次数的链表上,并且移除以后结点数为 0,最小访问次数需要加 1
  181. if (deleteNode.frequent == minFrequent && frequentMap.get(deleteNode.frequent).count == 0) {
  182. // 这一步需要仔细想一下,经过测试是正确的
  183. minFrequent++;
  184. }
  185. // 访问次数加 1
  186. deleteNode.frequent++;
  187. return deleteNode;
  188. }
  189. /**
  190. * 把结点放在对应访问次数的双向链表的头部
  191. *
  192. * @param frequent
  193. * @param addNode
  194. */
  195. private void addListNode2Head(int frequent, ListNode addNode) {
  196. DoubleLinkedList doubleLinkedList;
  197. // 如果不存在,就初始化
  198. if (frequentMap.containsKey(frequent)) {
  199. doubleLinkedList = frequentMap.get(frequent);
  200. } else {
  201. doubleLinkedList = new DoubleLinkedList();
  202. }
  203. // 添加到 DoubleLinkedList 的表头
  204. doubleLinkedList.addNode2Head(addNode);
  205. frequentMap.put(frequent, doubleLinkedList);
  206. }
  207. public static void main(String[] args) {
  208. LFUCache cache = new LFUCache(2);
  209. cache.put(1, 1);
  210. cache.put(2, 2);
  211. System.out.println(cache.map.keySet());
  212. int res1 = cache.get(1);
  213. System.out.println(res1);
  214. cache.put(3, 3);
  215. System.out.println(cache.map.keySet());
  216. int res2 = cache.get(2);
  217. System.out.println(res2);
  218. int res3 = cache.get(3);
  219. System.out.println(res3);
  220. cache.put(4, 4);
  221. System.out.println(cache.map.keySet());
  222. int res4 = cache.get(1);
  223. System.out.println(res4);
  224. int res5 = cache.get(3);
  225. System.out.println(res5);
  226. int res6 = cache.get(4);
  227. System.out.println(res6);
  228. }
  229. }
  230. 作者:liweiwei1419
  231. 链接:https://leetcode-cn.com/problems/lfu-cache/solution/ha-xi-biao-shuang-xiang-lian-biao-java-by-liweiwei/
  232. 来源:力扣(LeetCode)

参考链接:LFU算法实现(460. LFU缓存) - NeoZy - 博客园

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/空白诗007/article/detail/950820
推荐阅读
相关标签
  

闽ICP备14008679号