一种具有O(1)复杂度的LFU算法实现(java 实现)
创始人
2025-05-29 13:59:12
0

最近在做一些数据缓存方面的工作。研究了LRU算法和LFU算法。

  • LRU有成熟的O(1)复杂度算法:参考:https://juejin.cn/post/7055600927671058469
  • LFU最佳实现方法是O(log n)的。但项目中要求算法高效,所以学习了O(1)复杂度的算法实现:参考: https://tech.ipalfish.com/blog/2020/03/25/lfu/

算法本质上是维护一个如图的数据结构:

  • 一个HashMap
  • 一个双向链表(链表元素又是一个双向子链表,具有相同访问次数的数据会放在相同的链表中)。
    在这里插入图片描述

此时聪明的你应该想到如何实现了!下面以一个例子说明其原理。为了画图方便。省略了两类指针:

  1. HashMap指向子链表元素的指针
  2. 双向子链表元素指向双向链表节点的指针

在本文的实现中,初始时只有一个频次为0的链表:
在这里插入图片描述

当加入值时,都默认放在这个频次为0的链表中。比如添加a, b, c后。
在这里插入图片描述

当获取值时,会把它的频次加1,以b为例,即会把b移动到一个新的链表。
在这里插入图片描述

当缓存不足时,将优先淘汰访问频次最小的。可以从head开始查找,将找到的第一个从链表中删除即可。即会把a删除,删除后如图。
在这里插入图片描述

无论是加入、获取、淘汰,操作的复杂度都是O(1)的。

package com.iscas.intervention.data.cache;import java.util.HashMap;/*** O(1) 的LFU实现* @author cloudea* @date 2023/03/17*/
public class LFU {/*** 保存数据的双向链表结点*/public  static class LFUListNode {public String key;public Object value;public LFUListNode last;public LFUListNode next;public LFUDoubleListNode master; // 指向所属的频次节点public LFUListNode(String key, Object value) {this.key = key;this.value = value;}}/*** 保存频次的双向链表节点*/public static class LFUDoubleListNode {public int count; // 频次public LFUListNode head ;public LFUListNode tail;public LFUDoubleListNode last;public LFUDoubleListNode next;public LFUDoubleListNode (int count){this.count = count;// 初始化哨兵this.head = new LFUListNode(null, null);this.tail = new LFUListNode(null, null);this.head.next = this.tail;this.tail.last = this.head;}}/*** 频次双向链表*/public static class LFUDoubleList {public LFUDoubleListNode head;public LFUDoubleListNode tail;public LFUDoubleList(){this.head = new LFUDoubleListNode(0);this.tail = new LFUDoubleListNode(0);this.head.next = this.tail;this.tail.last = this.head;}}private HashMap caches = new HashMap<>();private LFUDoubleList counts = new LFUDoubleList();public LFU(){// 初始化访问频次为0的结点LFUDoubleListNode lfuDoubleListNode = new LFUDoubleListNode(0);lfuDoubleListNode.last = counts.head;lfuDoubleListNode.next = counts.tail;counts.head.next = lfuDoubleListNode;counts.tail.last = lfuDoubleListNode;}public void set(String key, Object value){if(caches.containsKey(key)) {// 如果存在,则更新一下value即可caches.get(key).value = value;}else{// 否则,需要放入链表中(放入频率为0的链表)LFUListNode node = new LFUListNode(key, value);node.master = counts.head.next;node.last = node.master.tail.last;node.next = node.master.tail;node.last.next = node;node.next.last = node;caches.put(key, node);}}public Object get(String key){if(caches.containsKey(key)){// 如果存在,直接返回,然后更新频次 (频次加1)LFUListNode node = caches.get(key);LFUDoubleListNode nextMaster = node.master.next;if(nextMaster.count != node.master.count + 1) {// 新建一个master节点LFUDoubleListNode A = node.master;LFUDoubleListNode B = node.master.next;LFUDoubleListNode n = new LFUDoubleListNode(node.master.count + 1);n.last = A;n.next = B;A.next = n;B.last = n;nextMaster = n;}// 把结点从当前master删除node.last.next = node.next;node.next.last = node.last;// 把结点加入到下一个masternode.last = nextMaster.tail.last;node.next = nextMaster.tail;node.last.next = node;node.next.last = node;node.master = nextMaster;// 返回节点值return node.value;}return null;}/*** 删除频次最小的元素*/public Object remove(){if(size() != 0){for(var i = counts.head.next; i != counts.tail; i = i.next){for(var j = i.head.next; j != i.tail; j = j.next){// 删除当前元素j.last.next = j.next;j.next.last = j.last;// 删除当前master(如果没有结点的话)if(j.master.head.next == j.master.tail){if(j.master.count != 0){j.master.last.next = j.master.next;j.master.next.last = j.master.last;}}// 从hashmap中删除caches.remove(j.key);return j.value;}}}return null;}public int size(){return caches.size();}
}

相关内容

热门资讯

不良率上升倒逼防线前移 银行收... 银行正在给个人信贷风控“上强度”。上海证券报记者近期自业内多方了解到,不少银行零售信贷业务从审批权限...
自媒体新手如何快速涨粉?这5个... 自媒体新手如何快速涨粉?这5个技巧让你少走弯路! 嗨,我是小融。 最近很多刚入门自媒体的朋友问我,怎...
乌兰察布市财政局关于黄金领域非... 乌兰察布市财政局关于黄金领域 非法金融活动风险提示 近期,黄金价格波动频繁,市场热度持续攀升,各类假...
一只鸡蛋架“直发”俄罗斯 无锡... (来源:无锡新传媒) 转自:无锡新传媒 一只3D打印塑料鸡蛋架,成为无锡国际邮件互换局正式开通运营后...
武汉楼市开启红五月 新房成交量... 原标题:武汉楼市开启红五月 数据爆表,新房成交量较去年同期翻番 武汉城建未来中心项目营销中心现场来...
一家精神病院竟现身A股公司前十... 5月8日,有投资者发现,盛通股份前十大股东名单中,竟出现了一家精神病院的身影。这家精神病院全称为“上...
真的老了!哈登心魔难除 骑士还... 哈登又拉胯了。 刚刚过去的两场东部半决赛,骑士都输的相当狼狈,而哈登的发挥更是灾难级的。 半决赛G1...
精神病院通报成上市公司前十大股... 近日,上市公司盛通股份发布一季报,披露了前十大股东名单。其中,一家名为“上饶市广丰区十五岭山精神病医...
天溯计量发布年报 上市首年检测... 转自:中国经营网 文 近日,计量检测机构天溯计量(301449.SZ)发布了2025年年度报告。年...
原创 全... 美伊真要停火了? 一页纸协议让全球油价闪崩! 就在今天,全球市场被一条消息炸开了锅。美国白宫觉得,他...
百信银行业绩:26Q1净利润大... 4月底,中信百信银行股份有限公司(下称“百信银行”)2025年财报及2026年一季度报接连披露—— ...
美光科技股价单周飙升38% 市... 【CNMO科技消息】受全球内存芯片短缺影响,美光科技股价本周大幅上涨。截至周五收盘,美光股价报746...
江西一精神病院炒股,炒成上市公... 近日,上市公司盛通股份(002599.SZ)发布一季报,披露了前十大股东名单,其中一家名为“上饶市广...
专访中国太保副总裁俞斌:从“+... 拥抱AI(人工智能),不再是保险行业的“选择题”,而是关乎企业生存与发展的“必答题”,更是企业决胜未...
多平台优化算法:美团取消超时扣... 图片来源:界面图库 5月8日,网信中国发布消息称,生活服务类平台算法治理已取得初步成效,美团、淘宝、...
原创 2... 2025年,国内系统重要性银行名单正式公布。这是我国金融体系的核心支柱,一共21家银行入选,它们是维...
东海县供销总社:“供销+龙头企... 近日,东海县供销合作总社鼎味泰直营店正式开业。作为东海县供销系统打造的新型社企便民服务网点,该门店的...
原创 阿... 深夜,一家零食店铺的客服后台弹出一条消息:“我上次买的芒果干,这次想换个不那么酸的口味,再帮我推荐几...
和平湾全新项目前瞻 负公摊、唯... 在沈阳,如果想在主城核心区域找一块容积率低于1.5的住宅用地,难度有多大? 过去三年,沈阳主城核心区...
精神病院与国际投行高盛同在 盛... 近日,盛通股份(002599.SZ)发布一季报,其前十大股东名单中,第九位为“上饶市广丰区十五岭山精...