当前位置:   article > 正文

AVL树&红黑树&位图&布隆过滤器&并查集&B树&图_布隆 avl

布隆 avl

AVL树

二叉树在数据有序时,会变成单链表,使得搜索效率极大的降低,为了维持二叉树的搜索特性,使得整体保持平衡,从而诞生二叉搜索树

AVL树的插入&旋转&验证

  1. public class AVLTree {
  2. public static void main(String[] args) {
  3. AVLTree avlTree = new AVLTree();
  4. int[] arr = {4, 2, 6, 1, 3, 5, 15, 7, 16,14};
  5. for (int i = 0; i < arr.length; i++) {
  6. avlTree.insert(arr[i]);
  7. }
  8. System.out.println(isBalanced(root));
  9. }
  10. public class TreeNode {
  11. public int val;
  12. public TreeNode left;
  13. public TreeNode right;
  14. public TreeNode parent;
  15. public int balanceFactor;
  16. public TreeNode(int val) {
  17. this.val = val;
  18. }
  19. }
  20. public static TreeNode root;
  21. public boolean insert(int val) {
  22. TreeNode nTreeNode = new TreeNode(val);
  23. //前部分是二叉树的插入
  24. if (root == null) {
  25. root = nTreeNode;
  26. return true;
  27. }
  28. TreeNode curNode = nTreeNode;
  29. TreeNode prevNode = null;
  30. while (curNode != null) {
  31. prevNode = curNode;
  32. if (nTreeNode.val > curNode.val) {
  33. curNode = curNode.left;
  34. } else if (nTreeNode.val < curNode.val) {
  35. curNode = curNode.right;
  36. } else {
  37. return false;
  38. }
  39. }
  40. //判断位置
  41. if (nTreeNode.val > prevNode.val) {
  42. prevNode.right = nTreeNode;
  43. } else {
  44. prevNode.left = nTreeNode;
  45. }
  46. //修改平衡因子
  47. while (prevNode != null) {
  48. curNode = nTreeNode;
  49. prevNode = curNode.parent;
  50. if (prevNode.right == curNode) {
  51. prevNode.balanceFactor++;
  52. } else {
  53. prevNode.balanceFactor--;
  54. }
  55. if (prevNode.balanceFactor == 0) {
  56. //平衡因子为0,树的高度没有发生变化,不影响上面树的平衡因子
  57. return true;
  58. } else if (prevNode.balanceFactor == -1 || prevNode.balanceFactor == 1) {
  59. } else {
  60. if (prevNode.balanceFactor == 2) {
  61. if (curNode.balanceFactor == 1) {
  62. leftRotation(prevNode);
  63. } else {
  64. LRrotation(prevNode);
  65. }
  66. } else {
  67. //prevNode.balanceFactor == -2
  68. if (curNode.balanceFactor == 1) {
  69. RLrotation(prevNode);
  70. } else {
  71. rightRotation(prevNode);
  72. }
  73. }
  74. break;
  75. }
  76. }
  77. return true;
  78. }
  79. private void RLrotation(TreeNode prevNode) {
  80. TreeNode Rnode = prevNode.right;
  81. TreeNode RLnode = Rnode.left;
  82. int bf = RLnode.balanceFactor;
  83. rightRotation(Rnode);
  84. leftRotation(prevNode);
  85. if (bf == 1) {
  86. prevNode.balanceFactor = -1;
  87. Rnode.balanceFactor = 0;
  88. RLnode.balanceFactor = 0;
  89. } else if (bf == -1) {
  90. prevNode.balanceFactor = 0;
  91. RLnode.balanceFactor = 0;
  92. Rnode.balanceFactor = 1;
  93. }
  94. }
  95. private void LRrotation(TreeNode prevNode) {
  96. TreeNode Lnode = prevNode.left;
  97. TreeNode LRnode = Lnode.right;
  98. int bf = LRnode.balanceFactor;
  99. leftRotation(Lnode);
  100. rightRotation(prevNode);
  101. if (bf == 1) {
  102. prevNode.balanceFactor = 0;
  103. LRnode.balanceFactor = 0;
  104. Lnode.balanceFactor = -1;
  105. } else if (bf == -1) {
  106. prevNode.balanceFactor = 1;
  107. Lnode.balanceFactor = 0;
  108. LRnode.balanceFactor = 0;
  109. }
  110. }
  111. private static void leftRotation(TreeNode parent) {
  112. TreeNode Rpaernt = parent.right;
  113. TreeNode RLparent = parent.right.left;
  114. TreeNode Ppaernt = parent.parent;
  115. parent.parent = Rpaernt;
  116. parent.right = RLparent;
  117. if (RLparent != null) {
  118. RLparent.parent = parent;
  119. }
  120. Rpaernt.left = parent;
  121. //判断是不是根结点
  122. if (parent == root) {
  123. root = Rpaernt;
  124. root.parent = null;
  125. } else {
  126. if (Rpaernt.val < Ppaernt.val) {
  127. Ppaernt.left = Rpaernt;
  128. } else {
  129. Ppaernt.right = Rpaernt;
  130. }
  131. }
  132. RLparent.balanceFactor = 0;
  133. parent.balanceFactor = 0;
  134. }
  135. private static void rightRotation(TreeNode parent) {
  136. TreeNode LRparent = parent.left.right;
  137. TreeNode Lparent = parent.left;
  138. TreeNode pParent = parent.parent;
  139. Lparent.right = parent;
  140. parent.left = LRparent;
  141. parent.parent = Lparent;
  142. if (LRparent != null) {
  143. LRparent.parent = parent;
  144. }
  145. //判断是不是根结点
  146. if (parent == root) {
  147. root = Lparent;
  148. root.parent = null;
  149. } else {
  150. //不是根结点就判断是左子树还是右子树
  151. if (pParent.val > Lparent.val) {
  152. pParent.left = Lparent;
  153. } else {
  154. pParent.right = Lparent;
  155. }
  156. }
  157. Lparent.balanceFactor = 0;
  158. pParent.balanceFactor = 0;
  159. }
  160. /**
  161. * 中序遍历
  162. */
  163. public static void inorderTree(TreeNode root) {
  164. if (root == null) {
  165. return;
  166. }
  167. inorderTree(root.left);
  168. System.out.print(root.val + " ");
  169. inorderTree(root.right);
  170. }
  171. private static int getHeight(TreeNode node) {
  172. if (node == null) {
  173. return 0;
  174. }
  175. int leftH = getHeight(node.left);
  176. int rightH = getHeight(node.right);
  177. return leftH > rightH ? leftH + 1 : rightH + 1;
  178. }
  179. public static boolean isBalanced(TreeNode root) {
  180. if (root == null) return true;
  181. int leftH = getHeight(root.left);
  182. int rightH = getHeight(root.right);
  183. if (rightH - leftH != root.balanceFactor) {
  184. return false;
  185. }
  186. return Math.abs(root.balanceFactor) <= 1
  187. && isBalanced(root.left)
  188. && isBalanced(root.right);
  189. }
  190. }

性能分析

AVL树对于静态数据来说,查找效率极高,但对于需要频繁修改的数据来说则效率并不理想,因为AVL的高效是为了保持平衡而旋转付出的代价

红黑树

特点

红黑树中结点的非黑及红

不存在两个连续的红色结点(黑色可以)

最长路径不能大于最短路径的两倍

根结点是黑色的

一个结点向下延伸的每条路径中黑色结点的是相同的

每个叶子结点都是黑色的,且都是空结点

红黑树是为了保持相对平衡,而不是像AVL树一样保持绝对平衡

如果黑色节点是X个,因为根结点是黑色的,且根结点到每个叶子节点的黑色节点数量相同,红色节点的子节点必是两个黑色节点,则红色节点最多X-1个,考虑最短路径纯黑色节点和最长路径红色以最多的形式在路径插入,查找的时间复杂度都是logN

红黑树节点初始化的时候把颜色设置为红色,因为当你插入一个颜色为黑色时,又需要保持各个路径黑色节点数目相同,就会增加多余的节点或者进行更复杂的调整,如果初始化为红色,则会较黑色节点减少复杂程度和开销

红黑树插入实现

  1. public class rbTree {
  2. public static void main(String[] args) {
  3. rbTree rbtree = new rbTree();
  4. int[] arr = {4, 2, 6, 1, 3, 5, 15, 7, 16,14};
  5. for (int i = 0; i < arr.length; i++) {
  6. rbtree.insert(arr[i]);
  7. }
  8. System.out.println(isRBTree(root));
  9. inOrder(root);
  10. }
  11. static class rbTreeNode {
  12. public int val;
  13. public rbTreeNode left;
  14. public rbTreeNode right;
  15. public rbTreeNode parent;
  16. public Color color;
  17. public rbTreeNode(int val) {
  18. this.val = val;
  19. this.color = Color.Red;
  20. }
  21. }
  22. static rbTreeNode root;
  23. public static boolean insert(int val) {
  24. rbTreeNode node = new rbTreeNode(val);
  25. if (root == null) {
  26. root = node;
  27. root.color = Color.Black;
  28. return true;
  29. }
  30. rbTreeNode cur = root;
  31. rbTreeNode prev = null;
  32. while (cur != null) {
  33. prev = cur;
  34. if (cur.val > val) {
  35. cur = cur.left;
  36. } else if (cur.val < val) {
  37. cur = cur.right;
  38. } else {
  39. System.out.println("已存在,无法存入");
  40. return false;
  41. }
  42. }
  43. if (val > prev.val) {
  44. prev.right = node;
  45. } else {
  46. prev.left = node;
  47. }
  48. node.parent = prev;
  49. cur = node;
  50. //进行颜色调整
  51. while (prev != null && prev.color == Color.Red) {
  52. //prev节点是红色,必存在祖父节点
  53. rbTreeNode grandfather = prev.parent;
  54. if (prev == grandfather.left) {
  55. rbTreeNode uncle = grandfather.right;
  56. if (uncle != null && uncle.color == Color.Red) {
  57. prev.color = Color.Black;
  58. uncle.color = Color.Black;
  59. grandfather.color = Color.Red;
  60. cur = grandfather;
  61. prev = cur.parent;
  62. } else {
  63. //叔叔节点为空或者叔叔节点的颜色是黑色
  64. //右旋
  65. if (cur == prev.right) {
  66. left(prev);
  67. rbTreeNode tmp = cur;
  68. cur = prev;
  69. prev = tmp;
  70. }
  71. right(grandfather);
  72. grandfather.color = Color.Red;
  73. prev.color = Color.Black;
  74. }
  75. } else {
  76. rbTreeNode uncle = grandfather.left;
  77. if (uncle != null && uncle.color == Color.Red) {
  78. prev.color = Color.Black;
  79. uncle.color = Color.Black;
  80. grandfather.color = Color.Red;
  81. cur = grandfather;
  82. prev = cur.parent;
  83. } else {
  84. //叔叔节点为空或者叔叔节点的颜色是黑色
  85. //右旋
  86. if (cur == prev.left) {
  87. right(prev);
  88. rbTreeNode tmp = cur;
  89. cur = prev;
  90. prev = tmp;
  91. }
  92. left(grandfather);
  93. grandfather.color = Color.Red;
  94. prev.color = Color.Black;
  95. }
  96. }
  97. }
  98. root.color = Color.Black;
  99. return true;
  100. }
  101. public static void inOrder(rbTreeNode root) {
  102. if(root==null) {
  103. return;
  104. }
  105. inOrder(root.left);
  106. System.out.print(root.val+" ");
  107. inOrder(root.right);
  108. }
  109. private static void left(rbTreeNode node) {
  110. rbTreeNode Rnode = node.right;
  111. rbTreeNode RLnode = Rnode.left;
  112. rbTreeNode pPnode = node.parent;
  113. Rnode.left = node;
  114. node.right = RLnode;
  115. node.parent = Rnode;
  116. if (RLnode != null) {
  117. RLnode.parent = node;
  118. }
  119. //是不是根结点
  120. if (node == root) {
  121. //是根节点
  122. root = Rnode;
  123. Rnode.parent = null;
  124. } else {
  125. if (pPnode.left == node) {
  126. pPnode.left = Rnode;
  127. } else {
  128. pPnode.right = Rnode;
  129. }
  130. Rnode.parent = pPnode;
  131. }
  132. }
  133. private static void right(rbTreeNode node) {
  134. rbTreeNode Lnode = node.left;
  135. rbTreeNode LRnode = Lnode.right;
  136. rbTreeNode pPnode = node.parent;
  137. Lnode.right = node;
  138. node.left = LRnode;
  139. node.parent = Lnode;
  140. if (LRnode != null) {
  141. LRnode.parent = node;
  142. }
  143. //是不是根结点
  144. if (node == root) {
  145. //是根节点
  146. root = Lnode;
  147. Lnode.parent = null;
  148. } else {
  149. if (pPnode.left == node) {
  150. pPnode.left = Lnode;
  151. } else {
  152. pPnode.right = Lnode;
  153. }
  154. Lnode.parent = pPnode;
  155. }
  156. }
  157. public static boolean isRBTree(rbTreeNode root) {
  158. if (root == null) {
  159. return true;
  160. }
  161. if(root.color!=Color.Black) {
  162. System.out.println("违反性质: 根结点的颜色是黑色");
  163. return false;
  164. }
  165. //判断是否存在连续红色节点,可以根据每个红色节点是否有父红色节点来判断
  166. if (!isRed(root)) {
  167. System.out.println("违法了性质: 红黑树不存在两个连续的红色节点");
  168. return false;
  169. }
  170. int blacknum = 0;
  171. rbTreeNode cur = root;
  172. while (cur != null) {
  173. if (cur.color == Color.Black) {
  174. blacknum++;
  175. }
  176. cur = cur.left;
  177. }
  178. int pathnum = 0;
  179. if (!blackNum(root, blacknum, pathnum)) {
  180. System.out.println("违反性质: 每条路径的黑色节点数目相同");
  181. return false;
  182. }
  183. return true;
  184. }
  185. private static boolean blackNum(rbTreeNode root, int blacknum, int pathnum) {
  186. if (root == null) {
  187. return true;
  188. }
  189. if (root.color == Color.Black) {
  190. pathnum++;
  191. }
  192. if (root.left == null && root.right == null ) {
  193. if(pathnum != blacknum) {
  194. System.out.println(root.val);
  195. return false;
  196. }
  197. }
  198. return blackNum(root.left, blacknum, pathnum) && blackNum(root.right, blacknum, pathnum);
  199. }
  200. private static boolean isRed(rbTreeNode root) {
  201. if (root == null) {
  202. return true;
  203. }
  204. if (root.color == Color.Red && root.parent.color == Color.Red) {
  205. return false;
  206. }
  207. return isRed(root.left) && isRed(root.right);
  208. }
  209. }

位图

位图是为了在海量数据中,整数且无重复的场景进行对某个数据存在的判断

实现

  1. public class BitMap {
  2. byte[] elements;
  3. int usedSize;
  4. public BitMap(int num) {
  5. elements = new byte[num / 8 + 1];
  6. }
  7. public void insert(int val) {
  8. if (val < 0) {
  9. throw new ArrayIndexOutOfBoundsException();
  10. }
  11. int byteIndex = val / 8;
  12. while (byteIndex > elements.length - 1) {
  13. elements = Arrays.copyOf(elements, elements.length + 1);
  14. }
  15. int bitIndex = val % 8;
  16. elements[byteIndex] |= (1 << bitIndex);
  17. usedSize++;
  18. }
  19. public boolean get(int val) {
  20. if (val < 0) {
  21. throw new ArrayIndexOutOfBoundsException();
  22. }
  23. int byteIndex = val / 8;
  24. if (byteIndex > elements.length - 1) {
  25. System.out.println("坐标越界违法");
  26. return false;
  27. }
  28. int bitIndex = val % 8;
  29. if (((elements[byteIndex]) & (1 << bitIndex)) != 0) {
  30. return true;
  31. }
  32. return false;
  33. }
  34. public void reSet(int val) {
  35. if (val < 0) {
  36. throw new ArrayIndexOutOfBoundsException();
  37. }
  38. int byteIndex = val / 8;
  39. if (byteIndex > elements.length - 1) {
  40. System.out.println("坐标越界违法");
  41. return;
  42. }
  43. int bitIndex = val % 8;
  44. elements[byteIndex] &= ~(1<<bitIndex);
  45. usedSize--;
  46. }
  47. public int getUsedSize() {
  48. return usedSize;
  49. }
  50. }

布隆过滤器

布隆过滤器是判断某样东西一定不存在或者可能存在,布隆过滤器是位图和多个哈希函数的结合,使用哈希函数就存在哈希碰撞,在一个元素插入的时候,使用位图多个位置来标记,难免后面出现元素会与其中一个位置或者多个位置重合,但是如果当元素判断的几个位置标记中有一个为0,那么就肯定不存在,而且对于布隆过滤器来说是不可以删除的,因为其中一个元素的删除,其中与之重合位置的其他元素会被认为不存在

实现

  1. package bloomfilter;
  2. import java.util.BitSet;
  3. class SimpleHash {
  4. public int cap;//容量
  5. public int rand;//随机种子
  6. public SimpleHash(int cap, int rand) {
  7. this.cap = cap;
  8. this.rand = rand;
  9. }
  10. /**
  11. * 哈希函数
  12. *
  13. * @param s 根据字符串返回一个哈希值
  14. * @return
  15. */
  16. int hash(String s) {
  17. int res = 0;
  18. for (int i = 0; i < s.length(); i++) {
  19. res = res * rand + s.charAt(i);
  20. }
  21. return res & (cap - 1);
  22. }
  23. }
  24. public class BloomFilter {
  25. public static void main(String[] args) {
  26. BloomFilter b = new BloomFilter();
  27. b.add("www");
  28. b.add("aaa");
  29. b.add("acb");
  30. b.add("abc");
  31. System.out.println(b.contains("abc"));
  32. }
  33. private static int DEFAULT_SIZE;
  34. BitSet bitSet;
  35. public int usedSize;//存储的个数
  36. public int[] rad = {1, 3, 7, 13, 26, 74};//随机种子
  37. SimpleHash[] simpleHashes;
  38. public BloomFilter() {
  39. bitSet = new BitSet(DEFAULT_SIZE);
  40. simpleHashes = new SimpleHash[rad.length];
  41. //根据每个随机种子生成对应的哈希函数
  42. for (int i = 0; i < rad.length; i++) {
  43. simpleHashes[i] = new SimpleHash(DEFAULT_SIZE, rad[i]);
  44. }
  45. }
  46. public void add(String s) {
  47. for (int i = 0; i < simpleHashes.length; i++) {
  48. bitSet.set(simpleHashes[i].hash(s));
  49. }
  50. usedSize++;
  51. }
  52. public boolean contains(String s) {
  53. for (int i = 0; i < simpleHashes.length; i++) {
  54. if (!bitSet.get(simpleHashes[i].hash(s))) {
  55. return false;
  56. }
  57. }
  58. return true;
  59. }
  60. }

优点:

对于数据量庞大时,可以对数据全量进行存储

时间复杂度取决于哈希函数的个数,与数据量无关

极大的节省空间

缺点:

对数据容易产生误判,但是可以确定一定不存在的数据

不支持删除操作

无法获取元素

海量数据问题

1. 对于一个100多G的文件,存放着IP,如何知道出现次数最多的IP?

首先不能使用<K,V>结构,因为数据太大,内存存不下,那我们就要对文件进行细分

但是不能均分来分别统计小文件中的最大值,因为IP随机分布,且小文件的最大值并不能代表大文件的最大值

我们可以分出200份小文件,大小0.5G,然后对大文件进行遍历,将大文件的IP通过哈希函数得到对应的下标,写入对应的文件,每个文件存储相同的IP,最后使用Map统计每个小文件IP出现的次数进行比较得到对应的IP

2. 给定100亿个整数,设计算法找到只出现一次的整数?

  (1)采用刚才的方法,进行哈希切割,创建足够数量的小文件,使用哈希函数来放入,最后统计出现一次的整数

  (2)也可以采用两个位图的方法进行,对一个数据出现次数的不同对两个位图相应位置进行调整,比如出现一次第一个位图表示0,第二个位图表示1,表示01;出现两次后,把第一个位图改为1,第二个位图改为0,表示10,以此类推

  (3)或者可以使用一个位图,但是你要用两个位来表示.一个数据用以统计出现次数

3. 给两个文件,分别有100亿个整数,我们只有1G内存,如何找到两个文件交集?

  (1)采用哈希分割,两个文件分别采用哈希函数写入各自的几百个小文件,然后因为采用相同的哈希函数,下标相同的文件中对于相同的数字建立一个大文件接收

  (2)使用位图,先将一个文件放在位图里,然后遍历另一个文件,对于B文件中出现的可以在A文件中找到就放到一个新的大文件来储存

  (3)仍是采用位图,将两个文件分别存入不同的位图,使用按位与运算得到交集,同样的,采用这个方法还可以通过按位或运算得到并集,通过按位异或得到差集

4. 位图应用变形:1个文件有100亿个int,1G内存,设计算法找到出现次数不超过2次的所有整数

  (1) 采用哈希切割

  (2) 使用两个位图,标记次数,00,01,10,11

5. 给两个文件,分别有100亿个query,我们只有1G内存,如何找到两个文件交集?分别给出精确算法和近似算法

   (1) 采用哈希切割,对于两个文件分别建立足够数量恰当大小的小文件,通过哈希函数分别将query存储到对于小文件,然后最后对于下标相同的小文件进行查找合并交集

   (2) 使用布隆过滤器,将第一个文件放到布隆过滤器,然后对第二个文件中出现的数据去布隆过滤器查找,但是布隆过滤器存在误判,不能准确判断

一堆数据要存放到多个服务器,如果使用一般哈希函数取余服务器的数量,就会导致增加服务器或者服务器崩溃时,原来在缓存中的数据一时间无法对映,会使数据访问压力剧增,可能会宕机

基于上述情况,可以采用一致性哈希解决,采用环形哈希,将服务器分布在哈希环上,数据的哈希函数会使得数据在哈希环上分布,顺时针缓存到遇到的第一个服务器,但是理想情况下是服务器分布分散,使得数据在各个服务器分布均匀,但是如果服务器分布集中就可能会使大量数据存储在一个服务器而使服务器压力很大

为了解决服务器在哈希环上分布不均匀的问题,就引入虚拟节点,使得服务器尽量均匀,每个虚拟节点对应一个服务器

并查集

并查集可以将数据进行划分不同的集合,并可以合并集合

实现并查集

  1. import java.util.Arrays;
  2. public class unionFindSet {
  3. int[] array;
  4. public unionFindSet(int num) {
  5. array = new int[num];
  6. //初始化为-1
  7. Arrays.fill(array, -1);
  8. }
  9. /**
  10. * 判断两个元素是不是同一个集合
  11. *
  12. * @param a
  13. * @param b
  14. * @return
  15. */
  16. public boolean isSameFindSet(int a, int b) {
  17. return findRoot(a) == findRoot(b);
  18. }
  19. /**
  20. * 查找元素根结点
  21. *
  22. * @param a
  23. * @return 返回根结点下标
  24. */
  25. private int findRoot(int a) {
  26. //如果下标负数,则违法抛出异常
  27. if (a < 0) {
  28. throw new ArrayIndexOutOfBoundsException();
  29. }
  30. while (array[a] >= 0) {
  31. a = array[a];
  32. }
  33. return a;
  34. }
  35. /**
  36. * 合并集合
  37. *
  38. * @param x1
  39. * @param x2
  40. */
  41. public boolean union(int x1, int x2) {
  42. //合并两个数要合并根结点
  43. //先要判断是不是同一集合
  44. int root1 = findRoot(x1);
  45. int root2 = findRoot(x2);
  46. if (root1 == root2) {
  47. System.out.println("属于同一集合,不需要合并");
  48. return false;
  49. }
  50. array[root1] += array[root2];
  51. array[root2] = root1;
  52. return true;
  53. }
  54. /**
  55. * 得到数据中有集合个数
  56. *
  57. * @return
  58. */
  59. public int getSet() {
  60. int count = 0;
  61. for (int x : array) {
  62. if (x < 0) {
  63. count++;
  64. }
  65. }
  66. return count;
  67. }
  68. public void print() {
  69. for (int i = 0; i < array.length; i++) {
  70. System.out.print(array[i]+" ");
  71. }
  72. System.out.println();
  73. }
  74. }

 

如果把true改为false就会是

如果使用false,打印的顺序是插入顺序,使用true的话,就会结合访问顺序,每次访问一个元素,会放置尾部,容量满且需要插入时,就会从头部删除

实现LRUCache

  1. import java.util.HashMap;
  2. public class LRUCache {
  3. static class DLinkNode {
  4. int key;
  5. int value;
  6. DLinkNode prev;
  7. DLinkNode next;
  8. public DLinkNode(int key, int value) {
  9. this.key = key;
  10. this.value = value;
  11. }
  12. public DLinkNode() {
  13. }
  14. }
  15. public DLinkNode head;//头结点
  16. public DLinkNode tail;//尾节点
  17. public int capacity;//容量
  18. public int usedSize;
  19. HashMap<Integer, DLinkNode> map = new HashMap<>();
  20. public LRUCache(int capacity) {
  21. head = new DLinkNode();
  22. tail = new DLinkNode();
  23. head.next = tail;
  24. tail.prev = head;
  25. this.capacity = capacity;
  26. }
  27. public void put(int key, int value) {
  28. DLinkNode node = map.get(key);
  29. //不存在该元素
  30. if (node == null) {
  31. //创建新的节点
  32. DLinkNode newNode = new DLinkNode(key, value);
  33. map.put(key, newNode);
  34. //尾插
  35. insertTail(newNode);
  36. usedSize++;
  37. //检查是否元素填满
  38. if (usedSize > capacity) {
  39. //头删
  40. int headKey = deleteHead().key;
  41. map.remove(headKey);
  42. usedSize--;
  43. }
  44. } else {
  45. //存在该元素
  46. node.value = value;
  47. //删除该元素
  48. deleteNode(node);
  49. //尾插元素
  50. insertTail(node);
  51. }
  52. }
  53. private DLinkNode deleteHead() {
  54. DLinkNode del = head.next;
  55. head.next = del.next;
  56. del.next.prev = head;
  57. return del;
  58. }
  59. public int get(int key) {
  60. DLinkNode node = map.get(key);
  61. if (node == null) {
  62. //不存在
  63. return -1;
  64. }
  65. deleteNode(node);
  66. insertTail(node);
  67. return node.value;
  68. }
  69. private void deleteNode(DLinkNode node) {
  70. node.prev.next = node.next;
  71. node.next.prev = node.prev;
  72. }
  73. private void insertTail(DLinkNode newNode) {
  74. DLinkNode tmpNode = tail.prev;
  75. tail.prev = newNode;
  76. newNode.next = tail;
  77. newNode.prev = tmpNode;
  78. tmpNode.next = newNode;
  79. }
  80. private void print() {
  81. DLinkNode cur = head.next;
  82. while (cur != tail) {
  83. System.out.print(cur.value + " ");
  84. cur = cur.next;
  85. }
  86. System.out.println();
  87. }
  88. public static void main(String[] args) {
  89. LRUCache lruCache = new LRUCache(3);
  90. lruCache.put(100, 10);
  91. lruCache.put(110, 11);
  92. lruCache.put(120, 12);
  93. System.out.println("获取元素");
  94. lruCache.print();
  95. System.out.println(lruCache.get(110));
  96. lruCache.print();
  97. System.out.println(lruCache.get(100));
  98. lruCache.print();
  99. System.out.println("存放元素,会删除头节点,因为头节点是最近最少使用的: ");
  100. lruCache.print();
  101. lruCache.put(999, 99);
  102. lruCache.print();
  103. }
  104. }

B-树

当数据量非常大时,对文件进行搜索,无法将数据都加载到内存,我们使用平衡二叉树,节点存储搜索有关的数据量和原数据的地址,搜索最差效率与树的高度有关,而且当你要搜索的数据量大时,节点内存无法存储,需要多次IO进行

所以我们可以从提高IO效率和减少树的高度来提高搜索的效率

数据存储到HashMap和存储到文件中,有什么区别?

1. HashMap存储在内存中,读取速度快

2. HashMap数据因为存储到内存中,所以断电丢失

M叉树的孩子节点M个,存储M-1个数据,但是为了后面分裂的方便,我们将多添加一个孩子节点和一个数据,那么就是M+1个孩子,存储M个数据,因为我们判断分裂的条件是当要插入数据时,存储数据个数等于M-1个数据,就需要进行分裂,但是因为你加上原来要插入的数据是M个,但是节点只能存储M-1,这就需要我们对于中间节点进行分类讨论判断,如果你多添加一个数据,就会多留出一个位置用于排序,直接对中间和两边的数据进行分裂即可

总结:

M叉树

1. 根结点关键字的数量范围[1,M-1],孩子节点的数量[2,M]

2. 非根结点关键字的数量范围[M/2-1,M-1],孩子节点数量[M/2,M];

3. 孩子节点的数量总是比关键字数量多1

B树满的时候会进行分裂,新节点和老节点在同一层,根结点分裂会增加树的高度,B树是天然平衡的

B-树插入实现

  1. public class bTree {
  2. class bTreeNode {
  3. int[] keys;
  4. int usedSize;
  5. bTreeNode[] childs;
  6. bTreeNode parent;
  7. public bTreeNode() {
  8. keys = new int[M];
  9. childs = new bTreeNode[M + 1];
  10. }
  11. }
  12. public static final int M = 3;
  13. bTreeNode root;
  14. public boolean insert(int val) {
  15. //B树为空,直接插入
  16. if (root == null) {
  17. root = new bTreeNode();
  18. root.keys[0] = val;
  19. root.usedSize++;
  20. return true;
  21. }
  22. //B树不为空
  23. //判断树里有没有这个值
  24. Pair<bTreeNode, Integer> pair = findVal(val);
  25. //根据value值判断这个值是不是在树中
  26. if (pair.getValue() != -1) {
  27. //等于-1,不存在该值
  28. //不等于,存在该值
  29. //存在该值无法进行插入,退出返回false
  30. return false;
  31. }
  32. bTreeNode parent = pair.getKey();
  33. //进行插入
  34. int index = parent.usedSize - 1;
  35. while (index >= 0) {
  36. if (val < parent.keys[index]) {
  37. parent.keys[index + 1] = parent.keys[index];
  38. } else {
  39. //大于情况,等于已经在find判断过了
  40. break;
  41. }
  42. index--;
  43. }
  44. parent.keys[index + 1] = val;
  45. parent.usedSize++;
  46. if (parent.usedSize >= M) {
  47. split(parent);
  48. }
  49. return true;
  50. }
  51. /**
  52. * 表示当前要分裂的节点
  53. *
  54. * @param sNode
  55. */
  56. private void split(bTreeNode sNode) {
  57. bTreeNode newNode = new bTreeNode();
  58. bTreeNode psNode = sNode.parent;
  59. //分裂节点的父节点
  60. //对分裂节点区域进行划分
  61. int i = 0;
  62. int mid = sNode.usedSize / 2;
  63. int j = mid + 1;
  64. while (j < sNode.usedSize) {
  65. newNode.keys[i] = sNode.keys[j];
  66. newNode.childs[i] = sNode.childs[j];
  67. //分裂节点孩子节点在转移的时候要修改他们的父结点
  68. if (sNode.childs[i] != null) {
  69. sNode.childs[i].parent = newNode;
  70. }
  71. j++;
  72. i++;
  73. }
  74. //将最后一个孩子节点记录下来,重复一次
  75. newNode.childs[i] = sNode.childs[j];
  76. if (sNode.childs[i] != null) {
  77. sNode.childs[i].parent = newNode;
  78. }
  79. newNode.usedSize = i;
  80. //更新原来节点的有效数据数量
  81. //减去右侧数据的数量,再减去中间数据,因为中间数据要被提到分裂节点的父结点中去
  82. sNode.usedSize = sNode.usedSize - i - 1;
  83. //更新新节点的父亲节点和有效数据数量
  84. if (sNode == root) {
  85. root = new bTreeNode();
  86. root.keys[0] = sNode.keys[mid];
  87. root.childs[0] = sNode;
  88. root.childs[1] = newNode;
  89. sNode.parent = root;
  90. newNode.parent = root;
  91. root.usedSize = 1;
  92. return;
  93. }
  94. newNode.parent = psNode;
  95. //将分裂节点的中间值提到父亲节点
  96. int fIndexEnd = psNode.usedSize - 1;
  97. //中间值
  98. int midValue = sNode.keys[mid];
  99. while (fIndexEnd >= 0) {
  100. if (sNode.parent.keys[fIndexEnd] > midValue) {
  101. sNode.parent.keys[fIndexEnd + 1] = sNode.parent.keys[fIndexEnd];
  102. sNode.parent.childs[fIndexEnd + 2] = sNode.parent.childs[fIndexEnd + 1];
  103. } else {
  104. break;
  105. }
  106. fIndexEnd--;
  107. }
  108. psNode.keys[fIndexEnd + 1] = midValue;
  109. psNode.childs[fIndexEnd + 2] = newNode;
  110. psNode.usedSize++;
  111. if (psNode.usedSize >= M) {
  112. split(psNode);
  113. }
  114. }
  115. private Pair<bTreeNode, Integer> findVal(int val) {
  116. bTreeNode cur = root;
  117. bTreeNode parent = null;
  118. while (cur != null) {
  119. int i = 0;
  120. while (i < cur.usedSize) {
  121. if (cur.keys[i] == val) {
  122. return new Pair<>(cur, i);
  123. } else if (cur.keys[i] < val) {
  124. i++;
  125. } else {
  126. break;
  127. }
  128. }
  129. parent = cur;
  130. cur = cur.childs[i];
  131. }
  132. return new Pair<>(parent, -1);
  133. }
  134. public static void main(String[] args) {
  135. bTree myBtree = new bTree();
  136. int[] array = {53, 139, 75, 49, 145, 36,101};
  137. for (int i = 0; i < array.length; i++) {
  138. myBtree.insert(array[i]);
  139. }
  140. System.out.println("fdsafafa");
  141. myBtree.inorder(myBtree.root);
  142. }
  143. private void inorder(bTreeNode root){
  144. if(root == null)
  145. return;
  146. for(int i = 0; i < root.usedSize; ++i){
  147. inorder(root.childs[i]);
  148. System.out.println(root.keys[i]);
  149. }
  150. inorder(root.childs[root.usedSize]);
  151. }
  152. }

B+树

B+树特点:

使用B+树搜索数据一定要遍历整个树的高度,B树不一定

对于<K,V>结构而言,非叶子节点存储K值,叶子节点存储K,V值

内存读取速度快,硬盘速度相较于较慢,从硬盘读取数据到内存,但是硬盘读取太慢了,内存的高速就无法发挥用处,需要使用缓存,让硬盘一次性读取很多数据,然后内存再从缓存中读取,减少IO次数,提高效率

图是由顶点集合和顶点关系组成的一种数据结构

图包括有向图和无向图

无向图边的条数到达N*(N-1)/2时,称为无向完全图,有向图则是达到N*(N-1)为有向完全图

树是一种特殊的图,图不一定是树

无向图的邻接矩阵是沿着对角线对称的,有向图不一定

邻接矩阵

  1. import java.util.Arrays;
  2. /**
  3. * 邻接矩阵
  4. */
  5. public class GraphByMatrix {
  6. private char[] arrayV;//顶点数组
  7. private int[][] matrix;
  8. private boolean isDirect;
  9. /**
  10. * @param size 顶点个数
  11. * @param Direct 是否是有向图
  12. */
  13. public GraphByMatrix(int size, boolean Direct) {
  14. arrayV = new char[size];
  15. matrix = new int[size][size];
  16. //使得二维数组矩阵用无穷大来进行初始化
  17. for (int i = 0; i < matrix.length; i++) {
  18. Arrays.fill(matrix[i], Integer.MAX_VALUE);
  19. }
  20. this.isDirect = Direct;
  21. }
  22. public void initArrayV(char[] array) {
  23. for (int i = 0; i < arrayV.length; i++) {
  24. arrayV[i] = array[i];
  25. }
  26. }
  27. /**
  28. * @param srcV 起点
  29. * @param destV 终点
  30. * @param weight 权重
  31. */
  32. public void addEdge(char srcV, char destV, int weight) {
  33. int srcVIndex = getIndexOfV(srcV);
  34. int destVIndex = getIndexOfV(destV);
  35. matrix[srcVIndex][destVIndex] = weight;
  36. //判断是不是无向图
  37. //因为无向图的邻接矩阵对称
  38. if (!isDirect) {
  39. matrix[destVIndex][srcVIndex] = weight;
  40. }
  41. }
  42. private int getIndexOfV(char v) {
  43. for (int i = 0; i < arrayV[i]; i++) {
  44. if (v == arrayV[i]) {
  45. return i;
  46. }
  47. }
  48. return -1;
  49. }
  50. public void printGraph() {
  51. for (int i = 0; i < arrayV.length; i++) {
  52. System.out.print(arrayV[i] + " ");
  53. }
  54. System.out.println();
  55. for (int i = 0; i < matrix.length; i++) {
  56. for (int j = 0; j < matrix[i].length; j++) {
  57. if (matrix[i][j] == Integer.MAX_VALUE) {
  58. System.out.print("∞ ");
  59. } else {
  60. System.out.print(matrix[i][j] + " ");
  61. }
  62. }
  63. System.out.println();
  64. }
  65. }
  66. /**
  67. * 获取顶点的度
  68. *
  69. * @param v
  70. * @return
  71. */
  72. public int getDevOfV(char v) {
  73. int count = 0;
  74. int index = getIndexOfV(v);
  75. for (int i = 0; i < matrix[index].length; i++) {
  76. if (matrix[index][i] != Integer.MAX_VALUE) {
  77. count++;
  78. }
  79. }
  80. //判断是不是有向图,有向图顶点的度包括入度和出度
  81. if (isDirect) {
  82. for (int i = 0; i < matrix.length; i++) {
  83. if (matrix[i][index] != Integer.MAX_VALUE) {
  84. count++;
  85. }
  86. }
  87. }
  88. return count;
  89. }
  90. public static void main(String[] args) {
  91. GraphByMatrix graph = new GraphByMatrix(4, true);
  92. char[] array = {'A', 'B', 'C', 'D'};
  93. graph.initArrayV(array);
  94. graph.addEdge('A', 'B', 1);
  95. graph.addEdge('A', 'D', 1);
  96. graph.addEdge('B', 'A', 1);
  97. graph.addEdge('B', 'C', 1);
  98. graph.addEdge('C', 'B', 1);
  99. graph.addEdge('C', 'D', 1);
  100. graph.addEdge('D', 'A', 1);
  101. graph.addEdge('D', 'C', 1);
  102. System.out.println();
  103. graph.printGraph();
  104. System.out.println(graph.getDevOfV('A'));
  105. }
  106. }

邻接表

  1. import java.util.ArrayList;
  2. public class GraphByNode {
  3. static class Node {
  4. public int src;//起点
  5. public int dest;//终点
  6. public int weight;//权重
  7. public Node next;
  8. public Node(int src, int dest, int weight) {
  9. this.src = src;
  10. this.dest = dest;
  11. this.weight = weight;
  12. }
  13. }
  14. public char[] arrayV;
  15. public ArrayList<Node> edgList;//存储边
  16. public boolean isDirect;
  17. public GraphByNode(boolean isDirect, int size) {
  18. this.arrayV = new char[size];
  19. edgList = new ArrayList<>(size);
  20. for (int i = 0; i < size; i++) {
  21. edgList.add(null);
  22. }
  23. this.isDirect = isDirect;
  24. }
  25. public void initArrayV(char[] array) {
  26. for (int i = 0; i < array.length; i++) {
  27. arrayV[i] = array[i];
  28. }
  29. }
  30. public void addEdge(char srcV, char destV, int weight) {
  31. int srcIndex = getIndexOfV(srcV);
  32. int destIndex = getIndexOfV(destV);
  33. addEdgeChild(srcIndex, destIndex, weight);
  34. if (!isDirect) {
  35. addEdgeChild(destIndex, srcIndex, weight);
  36. }
  37. }
  38. private void addEdgeChild(int srcIndex, int destIndex, int weight) {
  39. Node cur = edgList.get(srcIndex);
  40. while (cur != null) {
  41. //是否存在该值
  42. if (cur.dest == destIndex) {
  43. return;
  44. }
  45. cur = cur.next;
  46. }
  47. //不存在,创建
  48. Node newNode = new Node(srcIndex, destIndex, weight);
  49. newNode.next = edgList.get(srcIndex);
  50. edgList.set(srcIndex, newNode);
  51. }
  52. private int getIndexOfV(char v) {
  53. for (int i = 0; i < arrayV.length; i++) {
  54. if (arrayV[i] == v) {
  55. return i;
  56. }
  57. }
  58. return -1;
  59. }
  60. public void printGraph() {
  61. for (int i = 0; i < arrayV.length; i++) {
  62. System.out.print(arrayV[i]);
  63. Node cur = edgList.get(i);
  64. while (cur != null) {
  65. System.out.print("->" + arrayV[cur.dest]);
  66. cur = cur.next;
  67. }
  68. System.out.println();
  69. }
  70. }
  71. public int getDevOfV(char v) {
  72. int srcIndex = getIndexOfV(v);
  73. int count = 0;
  74. Node cur = edgList.get(srcIndex);
  75. while (cur != null) {
  76. count++;
  77. cur = cur.next;
  78. }
  79. //有向图额外考虑入度
  80. if (isDirect) {
  81. for (int i = 0; i < arrayV.length; i++) {
  82. //入度不需要考虑从本身出发的点
  83. if (i == srcIndex) {
  84. continue;
  85. } else {
  86. cur = edgList.get(i);
  87. while (cur != null) {
  88. if (cur.dest == srcIndex) {
  89. count++;
  90. }
  91. cur = cur.next;
  92. }
  93. }
  94. }
  95. }
  96. return count;
  97. }
  98. public static void main(String[] args) {
  99. GraphByNode graph = new GraphByNode(false, 4);
  100. char[] array = {'A', 'B', 'C', 'D'};
  101. graph.initArrayV(array);
  102. graph.addEdge('A', 'B', 1);
  103. graph.addEdge('A', 'D', 1);
  104. graph.addEdge('B', 'A', 1);
  105. graph.addEdge('B', 'C', 1);
  106. graph.addEdge('C', 'B', 1);
  107. graph.addEdge('C', 'D', 1);
  108. graph.addEdge('D', 'A', 1);
  109. graph.addEdge('D', 'C', 1);
  110. System.out.println("getDevOfV:: "+graph.getDevOfV('A'));
  111. graph.printGraph();
  112. }
  113. }

深度优先遍历&广度优先遍历

  1. /**
  2. * 广度优先遍历
  3. *
  4. * @param v
  5. */
  6. public void bfs(char v) {
  7. //得到起点的坐标
  8. int src = getIndexOfV(v);
  9. //标记是否出现过
  10. boolean[] visited = new boolean[arrayV.length];
  11. Queue<Integer> queue = new LinkedList<>();
  12. queue.offer(src);
  13. while (!queue.isEmpty()) {
  14. int top = queue.poll();
  15. System.out.print("->" + arrayV[top]);
  16. //弹出置为true
  17. visited[top] = true;
  18. for (int i = 0; i < arrayV.length; i++) {
  19. if (matrix[top][i] != Integer.MAX_VALUE && !visited[i]) {
  20. queue.offer(i);
  21. visited[i] = true;
  22. }
  23. }
  24. }
  25. }
  26. /**
  27. * 深度优先遍历
  28. *
  29. * @param v
  30. */
  31. public void dfs(char v) {
  32. //得到起始位置
  33. int index = getIndexOfV(v);
  34. boolean[] visited = new boolean[arrayV.length];
  35. dfsChild(index, visited);
  36. }
  37. private void dfsChild(int index, boolean[] visited) {
  38. System.out.print(arrayV[index] + "->");
  39. visited[index] = true;
  40. for (int i = 0; i < arrayV.length; i++) {
  41. if (matrix[index][i] != Integer.MAX_VALUE && !visited[i]) {
  42. dfsChild(i, visited);
  43. }
  44. }
  45. }

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/天景科技苑/article/detail/746888
推荐阅读
相关标签
  

闽ICP备14008679号