zoukankan      html  css  js  c++  java
  • 【Java面试题】HashMap原理深入理解

    HashMap原理

      HashMap内部是基于哈希表实现的键值对存储,继承 AbstractMap 并且实现了 Map 接口。

      HashMap基于hashing原理,我们通过put()和get()方法储存和获取对象。

      当我们将键值对传递给put()方法时,它调用键对象的hashCode()方法来计算hashcode,让后找到bucket位置来储存值对象。

      当获取对象时,通过键对象的equals()方法找到正确的键值对,然后返回值对象。

      HashMap使用LinkedList来解决碰撞问题,当发生碰撞了,对象将会储存在LinkedList的下一个节点中。 

    什么是哈希表

      在讨论哈希表之前,我们先大概了解下其他数据结构在新增,查找等基础操作执行性能

      数组:采用一段连续的存储单元来存储数据。对于指定下标的查找,时间复杂度为O(1);通过给定值进行查找,需要遍历数组,逐一比对给定关键字和数组元素,时间复杂度为O(n),当然,对于有序数组,则可采用二分查找,插值查找,斐波那契查找等方式,可将查找复杂度提高为O(logn);对于一般的插入删除操作,涉及到数组元素的移动,其平均复杂度也为O(n)

      链表:是一种物理存储单元上非连续、非顺序的存储结构,数据元素的逻辑顺序是通过链表中的指针链接次序实现的。对于链表的新增,删除等操作(在找到指定操作位置后),仅需处理结点间的引用即可,时间复杂度为O(1),而查找操作需要遍历链表逐一进行比对,复杂度为O(n)

      二叉树:对一棵相对平衡的有序二叉树,对其进行插入,查找,删除等操作,平均复杂度均为O(logn)。

      哈希表:相比上述几种数据结构,在哈希表中进行添加,删除,查找等操作,性能十分之高,不考虑哈希冲突的情况下,仅需一次定位即可完成,时间复杂度为O(1),接下来我们就来看看哈希表是如何实现达到惊艳的常数阶O(1)的。

      我们知道,数据结构的物理存储结构只有两种:顺序存储结构链式存储结构(像栈,队列,树,图等是从逻辑结构去抽象的,映射到内存中)。

      而在上面我们提到过,在数组中根据下标查找某个元素,一次定位就可以达到,哈希表利用了这种特性,哈希表的主干就是数组

      比如我们要新增或查找某个元素,我们通过把当前元素的关键字 通过某个函数映射到数组中的某个位置,通过数组下标一次定位就可完成操作。

            存储位置 = f(关键字)

      其中,这个函数f一般称为哈希函数,这个函数的设计好坏会直接影响到哈希表的优劣。举个例子,比如我们要在哈希表中执行插入操作:

          

      

      查找操作同理,先通过哈希函数计算出实际存储地址,然后从数组中对应地址取出即可。

      哈希冲突

      然而万事无完美,如果两个不同的元素,通过哈希函数得出的实际存储地址相同怎么办?也就是说,当我们对某个元素进行哈希运算,得到一个存储地址,然后要进行插入的时候,发现已经被其他元素占用了,其实这就是所谓的哈希冲突,也叫哈希碰撞。前面我们提到过,哈希函数的设计至关重要,好的哈希函数会尽可能地保证 计算简单散列地址分布均匀,但是,我们需要清楚的是,数组是一块连续的固定长度的内存空间,再好的哈希函数也不能保证得到的存储地址绝对不发生冲突。那么哈希冲突如何解决呢?

      a. 链地址法:将哈希表的每个单元作为链表的头结点,所有哈希地址为 i 的元素构成一个同义词链表。即发生冲突时就把该关键字链在以该单元为头结点的链表的尾部。

      b. 开放定址法:即发生冲突时,去寻找下一个空的哈希地址。只要哈希表足够大,总能找到空的哈希地址。

      c. 再哈希法:即发生冲突时,由其他的函数再计算一次哈希值。

      d. 建立公共溢出区:将哈希表分为基本表和溢出表,发生冲突时,将冲突的元素放入溢出表

    HashMap实现原理

      以下是 HashMap 源码里面的一些关键成员变量以及知识点。在后面的源码解析中会遇到,所以我们有必要先了解下。

      initialCapacity:初始容量。指的是 HashMap 集合初始化的时候自身的容量。可以在构造方法中指定;如果不指定的话,总容量默认值是 16 。需要注意的是初始容量必须是 2 的幂次方。

      size:当前 HashMap 中已经存储着的键值对数量,即 HashMap.size()

      loadFactor:加载因子。所谓的加载因子就是 HashMap (当前的容量/总容量) 到达一定值的时候,HashMap 会实施扩容。加载因子也可以通过构造方法中指定,默认的值是 0.75 。举个例子,假设有一个 HashMap 的初始容量为 16 ,那么扩容的阀值就是 0.75 * 16 = 12 。也就是说,在你打算存入第 13 个值的时候,HashMap 会先执行扩容。

      threshold:扩容阀值。即 扩容阀值 = HashMap 总容量 * 加载因子。当前 HashMap 的容量大于或等于扩容阀值的时候就会去执行扩容。扩容的容量为当前 HashMap 总容量的两倍。比如,当前   HashMap 的总容量为 16 ,那么扩容之后为 32 。

      table:Entry 数组。我们都知道 HashMap 内部存储 key/value 是通过 Entry 这个介质来实现的。而 table 就是 Entry 数组。

      在 Java 1.7 中,HashMap 的实现方法是数组 + 链表的形式。上面的 table 就是数组,而数组中的每个元素,都是链表的第一个结点。即如下图所示:

      

      HashMap的主干是一个Entry数组。Entry是HashMap的基本组成单元,每一个Entry包含一个key-value键值对。

    1 //HashMap的主干数组,可以看到就是一个Entry数组,初始值为空数组{},主干数组的长度一定是2的次幂,至于为什么这么做,后面会有详细分析。
    2 transient Entry<K,V>[] table = (Entry<K,V>[]) EMPTY_TABLE;

        Entry是HashMap中的一个静态内部类。代码如下

     1 static class Entry<K,V> implements Map.Entry<K,V> {
     2         final K key;
     3         V value;
     4         Entry<K,V> next;//存储指向下一个Entry的引用,单链表结构
     5         int hash;//对key的hashcode值进行hash运算后得到的值,存储在Entry,避免重复计算
     6 
     7         /**
     8          * Creates new entry.
     9          */
    10         Entry(int h, K k, V v, Entry<K,V> n) {
    11             value = v;
    12             next = n;
    13             key = k;
    14             hash = h;
    15         }

      所以,HashMap的整体结构如下

      

      

      简单来说,HashMap由数组+链表组成的,数组是HashMap的主体,链表则是主要为了解决哈希冲突而存在的。

      如果定位到的数组位置不含链表(当前entry的next指向null):那么对于查找,添加等操作很快,仅需一次寻址即可;

      如果定位到的数组包含链表:对于添加操作,其时间复杂度为O(n),首先遍历链表,存在即覆盖,否则新增;对于查找操作来讲,仍需遍历链表,然后通过key对象的equals方法逐一比对查找。

      所以,性能考虑,HashMap中的链表出现越少,性能才会越好。

       我们看下其中一个

     1 public HashMap(int initialCapacity, float loadFactor) {     //此处对传入的初始容量进行校验,最大不能超过MAXIMUM_CAPACITY = 1<<30(2
     2 30
     3 )
     4         if (initialCapacity < 0)
     5             throw new IllegalArgumentException("Illegal initial capacity: " +
     6                                                initialCapacity);
     7         if (initialCapacity > MAXIMUM_CAPACITY)
     8             initialCapacity = MAXIMUM_CAPACITY;
     9         if (loadFactor <= 0 || Float.isNaN(loadFactor))
    10             throw new IllegalArgumentException("Illegal load factor: " +
    11                                                loadFactor);
    12 
    13         this.loadFactor = loadFactor;
    14         threshold = initialCapacity;     
    15         init();//init方法在HashMap中没有实际实现,不过在其子类如 linkedHashMap中就会有对应实现
    16     }

      从上面这段代码我们可以看出,在常规构造器中,没有为数组table分配内存空间(有一个入参为指定Map的构造器例外),而是在执行put操作的时候才真正构建table数组

      OK,接下来我们来看看put操作的实现吧

     1 public V put(K key, V value) {
     2         //如果table数组为空数组{},进行数组填充(为table分配实际内存空间),入参为threshold,此时threshold为initialCapacity 默认是1<<4(2
     3 4
     4 =16)
     5         if (table == EMPTY_TABLE) {
     6             inflateTable(threshold);
     7         }
     8        //如果key为null,存储位置为table[0]或table[0]的冲突链上
     9         if (key == null)
    10             return putForNullKey(value);
    11         int hash = hash(key);//对key的hashcode进一步计算,确保散列均匀
    12         int i = indexFor(hash, table.length);//获取在table中的实际位置
    13         for (Entry<K,V> e = table[i]; e != null; e = e.next) {
    14         //如果该对应数据已存在,执行覆盖操作。用新value替换旧value,并返回旧value
    15             Object k;
    16             if (e.hash == hash && ((k = e.key) == key || key.equals(k))) {
    17                 V oldValue = e.value;
    18                 e.value = value;
    19                 e.recordAccess(this);
    20                 return oldValue;
    21             }
    22         }
    23         modCount++;//保证并发访问时,若HashMap内部结构发生变化,快速响应失败
    24         addEntry(hash, key, value, i);//新增一个entry
    25         return null;
    26     }

      先来看看inflateTable这个方法

    1 private void inflateTable(int toSize) {
    2         int capacity = roundUpToPowerOf2(toSize);//capacity一定是2的次幂
    3         threshold = (int) Math.min(capacity * loadFactor, MAXIMUM_CAPACITY + 1);//此处为threshold赋值,取capacity*loadFactor和MAXIMUM_CAPACITY+1的最小值,capaticy一定不会超过MAXIMUM_CAPACITY,除非loadFactor大于1
    4         table = new Entry[capacity];
    5         initHashSeedAsNeeded(capacity);
    6     }

      inflateTable这个方法用于为主干数组table在内存中分配存储空间,通过roundUpToPowerOf2(toSize)可以确保capacity为大于或等于toSize的最接近toSize的二次幂,比如toSize=13,则capacity=16;to_size=16,capacity=16;to_size=17,capacity=32.

    1 private static int roundUpToPowerOf2(int number) {
    2         // assert number >= 0 : "number must be non-negative";
    3         return number >= MAXIMUM_CAPACITY
    4                 ? MAXIMUM_CAPACITY
    5                 : (number > 1) ? Integer.highestOneBit((number - 1) << 1) : 1;
    6     }

      roundUpToPowerOf2中的这段处理使得数组长度一定为2的次幂,Integer.highestOneBit是用来获取最左边的bit(其他bit位为0)所代表的数值.

    hash函数

     1 //这是一个神奇的函数,用了很多的异或,移位等运算,对key的hashcode进一步进行计算以及二进制位的调整等来保证最终获取的存储位置尽量分布均匀
     2 final int hash(Object k) {
     3         int h = hashSeed;
     4         if (0 != h && k instanceof String) {
     5             return sun.misc.Hashing.stringHash32((String) k);
     6         }
     7 
     8         h ^= k.hashCode();
     9 
    10         h ^= (h >>> 20) ^ (h >>> 12);
    11         return h ^ (h >>> 7) ^ (h >>> 4);
    12     }

      以上hash函数计算出的值,通过indexFor进一步处理来获取实际的存储位置

    1 /**
    2      * 返回数组下标
    3      */
    4     static int indexFor(int h, int length) {
    5         return h & (length-1);
    6     }  

      h&(length-1)保证获取的index一定在数组范围内,举个例子,默认容量16,length-1=15,h=18,转换成二进制计算为

             1  0  0  1  0
        &   0  1  1  1  1
        __________________
            0  0  0  1  0    = 2    

      最终计算出的index=2。有些版本的对于此处的计算会使用 取模运算,也能保证index一定在数组范围内,不过位运算对计算机来说,性能更高一些(HashMap中有大量位运算)

      所以最终存储位置的确定流程是这样的:

      

      再来看看addEntry的实现:  

    1 void addEntry(int hash, K key, V value, int bucketIndex) {
    2         if ((size >= threshold) && (null != table[bucketIndex])) {
    3             resize(2 * table.length);//当size超过临界阈值threshold,并且即将发生哈希冲突时进行扩容
    4             hash = (null != key) ? hash(key) : 0;
    5             bucketIndex = indexFor(hash, table.length);
    6         }
    7 
    8         createEntry(hash, key, value, bucketIndex);
    9     }

      通过以上代码能够得知,当发生哈希冲突并且size大于阈值的时候,需要进行数组扩容,扩容时,需要新建一个长度为之前数组2倍的新的数组,然后将当前的Entry数组中的元素全部传输过去,扩容后的新数组长度为之前的2倍,所以扩容相对来说是个耗资源的操作。

    Java 1.8 中 HashMap 的不同

      在 Java 1.8 中,如果链表的长度超过了 8 ,那么链表将转化为红黑树;

      发生 hash 碰撞时,Java 1.7 会在链表头部插入,而 Java 1.8 会在链表尾部插入;

      在 Java 1.8 中,Entry 被 Node 代替(换了一个马甲)。

    手写一个简单的HashMap

      参考上面代码,简化代码如下:

     1 package com.test.springboot.starter.bean;
     2 
     3 import java.util.Collection;
     4 import java.util.Map;
     5 import java.util.Set;
     6 
     7 public class MyHashMap<K, V> {
     8 
     9     // 存储数组
    10     private Entry<K, V>[] table;
    11     // 容积
    12     private static Integer CAPACITY = 8;
    13     // 大小
    14     private Integer size = 0;
    15 
    16     // 构造方法 初始化table的值
    17     public MyHashMap() {
    18         this.table = new Entry[CAPACITY];
    19     }
    20 
    21     // 三个方法 size、get、put
    22     public int size() {
    23         return size;
    24     }
    25 
    26     public V get(K key) {
    27         // hash值
    28         Integer hash = key.hashCode();
    29         // 得到数据下表
    30         Integer index = hash % table.length;
    31 
    32         // 覆盖
    33         for(Entry<K, V> entry = table[index]; entry != null; entry = entry.next){
    34             if(key.equals(entry.k)){
    35                 return entry.v;
    36             }
    37         }
    38         return null;
    39     }
    40 
    41     public V put(K key, V value) {
    42 
    43         // hash值
    44         Integer hash = key.hashCode();
    45         // 得到数据下表
    46         Integer index = hash % table.length;
    47 
    48         // 覆盖
    49         for(Entry<K, V> entry = table[index]; entry != null; entry = entry.next){
    50             if(key.equals(entry.k)){
    51                 V oldValue = entry.v;
    52                 entry.v = value;
    53                 return oldValue;
    54             }
    55         }
    56 
    57         // 添加节点
    58         addEntry(key, value, index);
    59 
    60         return null;
    61     }
    62 
    63     // 添加到对应节点位置前面
    64     private void addEntry(K key, V value, Integer index){
    65         table[index] = new Entry(key, value, table[index]);
    66         // size + 1
    67         size++;
    68     }
    69 
    70     // 节点对象
    71     class Entry<K, V> {
    72         private K k;
    73         private V v;
    74         private Entry<K, V> next;
    75 
    76         public Entry(K k, V v, Entry<K, V> next){
    77             this.k = k;
    78             this.v = v;
    79             this.next = next;
    80         }
    81     }
    82 
    83 
    84     public static void main(String[] args) {
    85         MyHashMap<String, String> myHashMap = new MyHashMap<>();
    86         for(int i = 0; i < 10; i++) {
    87             myHashMap.put("1" + i, "小明" + i);
    88         }
    89 
    90         System.out.println(myHashMap.get("1"));
    91     }
    92 }

     

  • 相关阅读:
    台式机安装无线网卡建立共享操作
    Mean shift
    拉格朗日乘子法
    凸集和凸函数
    图像插值法
    高斯平滑
    gamma校正
    SIFT feature
    VS2013+Win10+opencv3.0配置(包括opencv2.4.10版本)
    caffe添加自己编写的Python层
  • 原文地址:https://www.cnblogs.com/h--d/p/14016552.html
Copyright © 2011-2022 走看看