深入理解HashMap 的工作原理及代码实现,什么时候用到红黑树

本文详细剖析了HashMap的内部结构,包括其基于数组和链表的实现原理,解释了拉链法解决hash冲突的方法,并探讨了JDK1.8中引入的红黑树优化策略。

GitHub:https://github.com/JDawnF

一.HashMap的内部结构(线程不安全,基于jdk1.7):

  • hashmap是无序的,因为每次根据 key 的 hashcode 映射到 Entry 数组上,所以遍历出来的顺序并不是写入的顺序
  • HashMap 底层是基于数组和链表实现的,如图所示,其中两个重要的参数:容量和负载因子;容量的默认大小是 16,负载因子是 0.75,当 HashMap 的 size > 16*0.75 时就会发生扩容(容量和负载因子都可以自由调整)。 
  • 内部包含了一个 Entry 类型的数组 table。HashMap的主干是一个Entry数组。Entry是HashMap的基本组成单元,每一个Entry包含一个key-value键值对。

    //HashMap的主干数组,可以看到就是一个Entry数组,初始值为空数组{},主干数组的长度一定是2的次幂
     transient Node<K,V>[] table;
    

    static class Entry<K,V> implements Map.Entry<K,V> {
        final K key;
        V value;
        Entry<K,V> next;//存储指向下一个Entry的引用,单链表结构
        int hash;//对key的hashcode值进行hash运算后得到的值,存储在Entry,避免重复计算
         
        //创建新的Entry
        Entry(int h, K k, V v, Entry<K,V> n) {
            value = v;
            next = n;
            key = k;
            hash = h;
        }
    
        public final K getKey() {
            return key;
        }
    
        public final V getValue() {
            return value;
        }
    
        public final V setValue(V newValue) {
            V oldValue = value;
            value = newValue;
            return oldValue;
        }
    
        public final boolean equals(Object o) {
            if (!(o instanceof Map.Entry))
                return false;
            Map.Entry e = (Map.Entry)o;
            Object k1 = getKey();
            Object k2 = e.getKey();
            if (k1 == k2 || (k1 != null && k1.equals(k2))) {
                Object v1 = getValue();
                Object v2 = e.getValue();
                if (v1 == v2 || (v1 != null && v1.equals(v2)))
                    return true;
            }
            return false;
        }
    
        public final int hashCode() {
            return Objects.hashCode(getKey()) ^ Objects.hashCode(getValue());
        }
    
        public final String toString() {
            return getKey() + "=" + getValue();
        }
    }

    Entry 存储着键值对。它包含了四个字段,从 next 字段我们可以看出 Entry 是一个链表。即数组中的每个位置被当成一个桶,一个桶存放一个链表。HashMap 使用拉链法来解决冲突,同一个链表中存放哈希值相同的 Entry。

  • 简单来说,HashMap由数组+链表组成的,数组是HashMap的主体,链表则是主要为了解决哈希冲突而存在的,如果定位到的数组位置不含链表(当前entry的next指向null),那么对于查找,添加等操作很快,仅需一次寻址即可;如果定位到的数组包含链表,对于添加操作,其时间复杂度为O(n),首先遍历链表,存在即覆盖,否则新增;对于查找操作来讲,仍需遍历链表,然后通过key对象的equals方法逐一比对查找。所以,性能考虑,HashMap中的链表出现越少,性能才会越好。

    
    //实际存储的key-value键值对的个数
    transient int size;
    //阈值,当table == {}时,该值为初始容量(初始容量默认为16);当table被填充了,也就是为table分配内存空间后,threshold一般为 capacity*loadFactory。HashMap在进行扩容时需要参考threshold,后面会详细谈到
    int threshold;
    //负载因子,代表了table的填充度有多少,默认是0.75
    final float loadFactor;
    //用于快速失败,由于HashMap非线程安全,在对HashMap进行迭代时,如果期间其他线程的参与导致HashMap的结构发生变化了(比如put,remove等操作),需要抛出异常ConcurrentModificationException
    transient int modCount;

     

二、拉链法的工作原理(解决hash冲突)

在哈希表中进行插入和查找操作同理,先通过哈希函数计算出实际存储地址,然后从数组中对应地址取出即可。所谓哈希冲突是指两个元素通过哈希函数计算出来的值是相同的,即当我们对某个元素进行哈希运算,得到一个存储地址,然后要进行插入的时候,发现已经被其他元素占用了,其实这就是所谓的哈希冲突。所以,好的哈希函数会尽可能地保证 计算简单散列地址分布均匀。

哈希冲突的解决方案有多种:开放定址法(发生冲突,继续寻找下一块未被占用的存储地址),再散列函数法,链地址法,而HashMap即是采用了链地址法,也就是数组+链表的方式。

  • 新建一个 HashMap,默认大小为 16;

  • 插入 <K1,V1> 键值对,先计算 K1 的 hashCode 为 115,使用除留余数法得到所在的桶下标 115%16=3。
  • 插入 <K2,V2> 键值对,先计算 K2 的 hashCode 为 118,使用除留余数法得到所在的桶下标 118%16=6。
  • 插入 <K3,V3> 键值对,先计算 K3 的 hashCode 为 118,使用除留余数法得到所在的桶下标 118%16=6,插在 <K2,V2> 前面。
  • 应该注意到链表的插入是以头插法方式进行的,例如上面的 <K3,V3> 不是插在 <K2,V2> 后面,而是插入在链表头部。
  • 查找需要分成两步进行:

    • 计算键值对所在的桶;
    • 在链表上顺序查找,时间复杂度显然和链表的长度成正比。
  • HashMap<String, String> map = new HashMap<>();
    map.put("K1", "V1");
    map.put("K2", "V2");
    map.put("K3", "V3");

    下面的桶对应数组的一个元素,即数组中的每个位置被当成一个桶,一个桶放一个链表。

  • put方法:首先会将传入的 Key 做hash运算计算出 hashcode,然后根据数组长度取模计算出在数组中的 index 下标。

    由于在计算中位运算比取模运算效率高的多,所以 HashMap 规定数组的长度为 2^n 。这样用 2^n - 1 做位运算与取模效果一致,并且效率还要高出许多。

    由于数组的长度有限,所以难免会出现不同的 Key 通过运算得到的 index 相同,这种情况可以利用链表来解决,HashMap 会在 table[index]处形成链表,采用头插法将数据插入到链表中。

    public V put(K key, V value) {
    //如果table数组为空数组{},进行数组填充(为table分配实际内存空间),入参为threshold,此时threshold为initialCapacity 默认是1<<4(24=16)
        if (table == EMPTY_TABLE) {
            inflateTable(threshold);
        }
        //如果key为null,存储位置为table[0]或table[0]的冲突链上
        if (key == null)
            return putForNullKey(value);
        int hash = hash(key);//对key的hashcode进一步计算,确保散列均匀
        // 确定桶下标,返回数组下表
        int i = indexFor(hash, table.length);
        // 先找出是否已经存在键为 key 的键值对,如果存在的话就更新(覆盖)这个键值对的值为 value
        for (Entry<K,V> e = table[i]; e != null; e = e.next) {
            Object k;
            if (e.hash == hash && ((k = e.key) == key || key.equals(k))) {
                V oldValue = e.value;
                e.value = value;
                e.recordAccess(this);
                return oldValue;
            }
        }
    
        modCount++;//保证并发访问时,若HashMap内部结构发生变化,快速响应失败
        // 插入新键值对,即增加新的entry
        addEntry(hash, key, value, i);
        return null;
    }

    HashMap 允许插入键为 null 的键值对。但是因为无法调用 null 的 hashCode() 方法,也就无法确定该键值对的桶下标,只能通过强制指定一个桶下标来存放。HashMap 使用第 0 个桶存放键为 null 的键值对。

    private V putForNullKey(V value) {
        for (Entry<K,V> e = table[0]; e != null; e = e.next) {
            if (e.key == null) {
                V oldValue = e.value;
                e.value = value;
                e.recordAccess(this);
                return oldValue;
            }
        }
        modCount++;
        addEntry(0, null, value, 0);
        return null;
    }

    使用链表的头插法,也就是新的键值对插在链表的头部,而不是链表的尾部。

    void addEntry(int hash, K key, V value, int bucketIndex) {
        if ((size >= threshold) && (null != table[bucketIndex])) {
            resize(2 * table.length);//当size超过临界阈值threshold,并且即将发生哈希冲突时进行扩容
            hash = (null != key) ? hash(key) : 0;
            bucketIndex = indexFor(hash, table.length);
        }
    
        createEntry(hash, key, value, bucketIndex);
    }
    
    void createEntry(int hash, K key, V value, int bucketIndex) {
        Entry<K,V> e = table[bucketIndex];
        // 头插法,链表头部指向新的键值对
        table[bucketIndex] = new Entry<>(hash, key, value, e);
        size++;
    }
    Entry(int h, K k, V v, Entry<K,V> n) {
        value = v;
        next = n;
        key = k;
        hash = h;
    }
    

    resize是扩容,默认扩为原来的2倍大小。通过addEntry的代码能够得知,当发生哈希冲突并且size大于阈值的时候,需要进行数组扩容,扩容时,需要新建一个长度为之前数组2倍的新的数组,然后将当前的Entry数组中的元素全部传输过去,扩容后的新数组长度为之前的2倍,所以扩容相对来说是个耗资源的操作。

三、具体实现:

首先,先看看inflateTable:

private void inflateTable(int toSize) {
        int capacity = roundUpToPowerOf2(toSize);//capacity一定是2的次幂
;//此处为threshold赋值,取capacity*loadFactor和MAXIMUM_CAPACITY+1的最小值,capaticy一定不会超过
        threshold = (int) Math.min(capacity * loadFactor, MAXIMUM_CAPACITY + 1)MAXIMUM_CAPACITY,除非loadFactor大于1
        table = new Entry[capacity];
        initHashSeedAsNeeded(capacity);
    }

inflateTable这个方法用于为主干数组table在内存中分配存储空间,通过roundUpToPowerOf2(toSize)可以确保capacity为大于或等于toSize的最接近toSize的二次幂,比如toSize=13,则capacity=16;to_size=16,capacity=16;to_size=17,capacity=32.

private static int roundUpToPowerOf2(int number) {
        // assert number >= 0 : "number must be non-negative";
        return number >= MAXIMUM_CAPACITY
                ? MAXIMUM_CAPACITY
                : (number > 1) ? Integer.highestOneBit((number - 1) << 1) : 1;
    }

roundUpToPowerOf2中的这段处理使得数组长度一定为2的次幂,Integer.highestOneBit是用来获取最左边的bit(其他bit位为0)所代表的数值.

hash函数:

//这是一个神奇的函数,用了很多的异或,移位等运算,对key的hashcode进一步进行计算以及二进制位的调整等来保证最终获取的存储位置尽量分布均匀
final int hash(Object k) {
        int h = hashSeed;
        if (0 != h && k instanceof String) {
            return sun.misc.Hashing.stringHash32((String) k);
        }

        h ^= k.hashCode();

        h ^= (h >>> 20) ^ (h >>> 12);
        return h ^ (h >>> 7) ^ (h >>> 4);
    }

以上hash函数计算出的值,通过indexFor进一步处理来获取实际的存储位置

/**
     * 返回数组下标
     */
    static int indexFor(int h, int length) {
        return h & (length-1);
    }

 h&(length-1)保证获取的index一定在数组范围内,举个例子,默认容量16,length-1=15,h=18,转换成二进制计算为

最终计算出的index=2。有些版本的对于此处的计算会使用 取模运算,也能保证index一定在数组范围内,不过位运算对计算机来说,性能更高一些(HashMap中有大量位运算)

 

注意:

  • 在并发环境下使用 HashMap 容易出现死循环。

  • 并发场景发生扩容,调用 resize() 方法里的 rehash() 时,容易出现环形链表。这样当获取一个不存在的 key 时,计算出的 index 正好是环形链表的下标时就会出现死循环。

  • 在 JDK1.8 中对 HashMap 进行了优化: 当 hash 碰撞之后写入链表的长度超过了阈值(默认为8),链表将会转换为红黑树。假设 hash 冲突非常严重,一个数组后面接了很长的链表,此时重新的时间复杂度就是 O(n) 。如果是红黑树,时间复杂度就是 O(logn) 。

此外,JDK1.8以后在解决哈希冲突时有了较大的变化,当链表长度大于阈值(默认为8)时,将链表转化为红黑树,以减少搜索时间。

JDK1.8

static final int TREEIFY_THRESHOLD = 8;    // 超过8就转为红黑树
static final int UNTREEIFY_THRESHOLD = 6;    // 少于6红黑树则转为链表

https://zhuanlan.zhihu.com/p/21673805

http://www.cnblogs.com/chengxiao/p/6059914.html

<think>好的,我现在需要处理用户关于Java集合框架的面试题的需求。首先,用户要求全面且深入的理解,所以得覆盖集合框架的主要部分,比如List、Set、Map以及它们的实现类。同时,用户提到了之前的引用内容,虽然那些引用中有一些关于MyBatis、List遍历方式HashSet的信息,但用户现在明确需要集合框架的面试题,所以可能需要重点结合这些已有的内容,同时扩展其他相关知识点。 首先,我应该先回顾Java集合框架的整体结构。集合框架主要包括CollectionMap两个接口。Collection下又有List、Set、Queue,而Map则是独立的接口。常见的实现类如ArrayList、LinkedList、HashSet、TreeSet、HashMap、LinkedHashMap等都需要涵盖。 接下来,用户提供的引用[2]提到List遍历的不同方式及最佳实践,这部分可以作为问题之一,比如遍历List的方法及其原理,结合RandomAccess接口。引用[3]提到HashSet的特性,可以作为Set部分的问题。但用户需要更全面的内容,可能需要补充Map相关的问题,比如HashMap工作原理、ConcurrentHashMap的线程安全机制等。 还需要考虑常见的面试题,比如ArrayListLinkedList的区别,HashMapHashTable的区别,ConcurrentHashMap如何实现线程安全,集合的排序(ComparableComparator),Fail-FastFail-Safe机制,迭代器的使用等。此外,可能还需要包括Java 8的新特性对集合框架的影响,比如Stream API、Lambda表达式在集合中的应用。 要注意问题需要覆盖基础、进阶以及底层实现原理,答案解析要详细,确保用户能够理解。例如,在解释HashMap时,需要提到哈希表的结构、负载因子、扩容机制、红黑树优化等。对于线程安全的部分,要对比Vector、Collections.synchronizedListCopyOnWriteArrayList的区别。 同时,用户之前的问题中有关于MyBatis的内容,但当前需求是集合框架,所以可能不需要涉及ORM部分,除非有集合在MyBatis中的应用,但暂时没想到,所以可以忽略。 还要注意引用[2]中提到的遍历方式的最佳实践,可以作为问题的一个点,强调根据不同的List实现选择遍历方式。引用[3]中的HashSet可以扩展到Set的整体讨论,比如与TreeSet的比较,LinkedHashSet的特点等。 需要确保问题全面,涵盖各个主要接口实现类,以及它们的特性、使用场景、性能比较、线程安全等。此外,常见考点如迭代器、并发修改异常、equalshashCode的契约也需要包括进去。 最后,问题的排列应该从基础到高级,逐步深入,帮助用户系统化复习。每个问题后附上详细的解析,并适当使用代码示例或LaTeX公式来说明数据结构,比如HashMap的哈希桶结构,或红黑树的时间复杂度。 现在需要整理出大概的问题列表,并确保覆盖所有关键点。可能的问题包括: 1. Java集合框架的总体结构是怎样的? 2. ArrayListLinkedList的区别及适用场景? 3. HashMap工作原理及扩容机制? 4. ConcurrentHashMap如何实现线程安全? 5. HashSet如何保证元素唯一性? 6. 如何正确遍历List并根据实现选择最佳方式? 7. 什么是Fail-FastFail-Safe机制? 8. ComparableComparator的区别? 9. TreeMapHashMap的区别? 10. Java 8对集合框架有哪些增强? 每个问题需要详细解析,结合底层实现代码示例,比如HashMap的put方法流程,ConcurrentHashMap的锁分段技术等。同时,在回答中适当引用之前的引用内容,比如引用[2]关于遍历方式的部分,引用[3]关于HashSet的部分,但主要还是要根据用户需求扩展更多相关内容。 需要确保答案结构清晰,分点回答,使用代码块、LaTeX公式(如时间复杂度O(n))等格式,符合用户给出的系统级指令,比如数学表达式用$...$,独立公式用$$...$$,虽然可能在集合框架中数学公式较少,但时间复杂度可能需要用到,比如$O(1)$、$O(n)$等。例如在比较ArrayListLinkedList的访问性能时,可以写成ArrayList的随机访问时间复杂度为$O(1)$,而LinkedList为$O(n)$。 最后,生成相关问题部分需要根据回答内容提出进一步的问题,帮助用户深入思考,比如关于红黑树HashMap中的应用,或如何设计一个线程安全的集合类等。</think>### Java集合框架核心面试题解析 #### 1. Java集合框架的层次结构是什么? **集合框架分为两大根接口**: - **`Collection`**:存储单一元素,包含`List`(有序可重复)、`Set`(无序唯一)、`Queue`(队列)子接口。 - **`Map`**:存储键值对,独立于`Collection`,核心实现类如`HashMap`、`TreeMap`。 **示例代码结构**: ```java // List示例 List<String> arrayList = new ArrayList<>(); List<String> linkedList = new LinkedList<>(); // Set示例 Set<String> hashSet = new HashSet<>(); Set<String> treeSet = new TreeSet<>(); // Map示例 Map<Integer, String> hashMap = new HashMap<>(); ``` --- #### 2. `ArrayList`与`LinkedList`的区别? | **特性** | **ArrayList** | **LinkedList** | |------------------|---------------------------------|---------------------------------| | 底层结构 | 动态数组 | 双向链表 | | 随机访问性能 | $O(1)$(通过索引直接定位)[^2] | $O(n)$(需遍历节点) | | 插入/删除性能 | 尾部操作$O(1)$,中间操作$O(n)$ | 头尾操作$O(1)$,中间操作$O(n)$ | | 内存占用 | 连续内存,节省空间 | 每个节点额外存储前后指针 | | 最佳遍历方式 | `for`循环(支持`RandomAccess`) | `Iterator`或`foreach` | --- #### 3. `HashMap`的实现原理? **核心机制**: - **哈希表结构**:数组+链表/红黑树(Java 8优化)。 - **哈希冲突解决**:拉链法(链表处理冲突,链表长度≥8时转红黑树)。 - **扩容机制**:默认负载因子$0.75$,容量翻倍,重新哈希。 **关键代码逻辑(`put`方法)**: ```java public V put(K key, V value) { int hash = hash(key); // 计算哈希值 int index = (n-1) & hash; // 确定桶位置 if (table[index] == null) { table[index] = newNode(hash, key, value, null); } else { // 处理链表或红黑树插入 } if (size++ > threshold) resize(); // 扩容检查 } ``` **时间复杂度**: - 理想情况(无冲突):$O(1)$ - 最坏情况(全冲突):$O(\log n)$(红黑树优化后) --- #### 4. `ConcurrentHashMap`如何保证线程安全? - **Java 7**:分段锁(Segment),每段独立加锁。 - **Java 8**:CAS + `synchronized`(仅锁单个桶头节点),提升并发度。 - **示例代码片段**: ```java // Java 8的putVal方法(简化) final V putVal(K key, V value) { Node<K,V>[] tab; int hash = hash(key); if ((tab = table) == null) tab = initTable(); int index = (tab.length - 1) & hash; synchronized (tab[index]) { // 锁住当前桶 // 插入或更新节点 } } ``` --- #### 5. `HashSet`如何保证元素唯一性? - **依赖机制**:元素的`hashCode()``equals()`方法。 - **步骤1**:比较哈希值,不同则直接插入。 - **步骤2**:哈希值相同则调用`equals()`确认是否重复。 - **底层实现**:基于`HashMap`(值存储在`HashMap`的键中,值统一为`PRESENT`对象)。 --- #### 6. 遍历`List`的最佳实践? - **`ArrayList`**:优先使用`for`循环(支持`RandomAccess`,$O(1)$访问)。 - **`LinkedList`**:使用`Iterator`或`foreach`(避免多次遍历,时间复杂度$O(n^2)$)。 - **代码示例**: ```java // ArrayList遍历 for (int i=0; i<list.size(); i++) { System.out.println(list.get(i)); } // LinkedList遍历 for (String s : list) { System.out.println(s); } ``` --- #### 7. `Fail-Fast`与`Fail-Safe`机制的区别? | **机制** | **Fail-Fast** | **Fail-Safe** | |---------------|--------------------------------|------------------------------| | 触发条件 | 遍历时检测到结构修改(如`ArrayList`) | 允许遍历时修改(如`CopyOnWriteArrayList`) | | 实现方式 | 通过`modCount`字段检查 | 遍历原始集合的副本 | | 异常类型 | `ConcurrentModificationException` | 无异常 | --- #### 8. `Comparable`与`Comparator`的区别? - **`Comparable`**:自然排序,需在类内实现`compareTo()`。 ```java class Student implements Comparable<Student> { public int compareTo(Student s) { return this.age - s.age; } } ``` - **`Comparator`**:定制排序,外部定义比较器。 ```java Comparator<Student> comparator = (s1, s2) -> s1.getName().compareTo(s2.getName()); Collections.sort(list, comparator); ``` --- #### 9. `TreeMap`的排序原理? - **红黑树结构**:自平衡二叉搜索树,保证插入、删除、查找的时间复杂度为$O(\log n)$。 - **排序规则**:按键的自然顺序或自定义`Comparator`排序。 --- #### 10. Java 8对集合框架的增强? - **Stream API**:链式操作处理数据。 ```java list.stream().filter(s -> s.startsWith("A")).forEach(System.out::println); ``` - **Lambda表达式**:简化集合操作。 ```java list.forEach(s -> System.out.println(s)); ``` - **默认方法**:如`List.sort()`、`Map.getOrDefault()`。 --- ### 相关问题扩展 1. **HashMap为什么线程不安全?如何复现问题?** 2. **CopyOnWriteArrayList的实现原理及适用场景?** 3. **红黑树HashMap中的具体应用及优势?** 4. **如何设计一个支持高并发的缓存系统(基于集合框架)?** 5. **Java 9中集合工厂方法(如`List.of()`)的特性?** --- **引用说明** [^1]: MyBatis的ORM特性与集合框架无直接关联,但集合常用于处理数据库查询结果。 : List遍历方式的最佳实践基于`RandomAccess`接口的检测。 [^3]: HashSet的唯一性依赖于哈希机制,与HashMap实现紧密相关。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值