面试阿里,HashMap 这一篇就够了

简介: 面试阿里,HashMap 这一篇就够了

目录


前言

正文

二狗:天天听你憨逼吹牛,是时候让你知道什么叫残忍了。

二狗:先来点简单的,介绍下 HashMap 的底层数据结构吧。

二狗:为什么要改成数组+链表+红黑树

二狗:那在什么时候用链表?什么时候用红黑树?

狗:为什么链表转红黑树的阈值是8

二狗:(呦呦呦,时间和空间上权衡的结果,还装起B来了)那为什么转回链表节点是用的6而不是复用8

二狗:(小菜鸡,懂得还不少)那 HashMap 有哪些重要属性?分别用于做什么的?

二狗:threshold 除了用于存放扩容阈值还有其他作用吗?

二狗:HashMap 的默认初始容量是多少?HashMap 的容量有什么限制吗?

二狗:(你他娘的是在绕口令吧)你这个*@%#&N次方是怎么算的?

二狗:卧槽,还彪英文,来来来,这代码你给我解释下。

二狗:(这叼毛讲的还凑合啊,连我都听懂了)你说 HashMap 的容量必须是 2 N 次方,这是为什么?

二狗:你说 HashMap 的默认初始容量是 16,为什么是16而不是其他的?

二狗:为什么是0.75而不是其他的?

二狗:为什么不是 0.74 0.76

二狗:那我们换个问题问吧,HashMap 的插入流程是怎么样的?

二狗:图里刚开始有个计算 key hash 值,是怎么设计的?

二狗:为什么要将 hashCode 的高16位参与运算?

二狗:扩容(resize)流程介绍下?

二狗:红黑树和链表都是通过 e.hash & oldCap == 0 来定位在新表的索引位置,这是为什么?

二狗:介绍一下死循环问题?

二狗:(尼玛,没听懂,尴尬了)那总结下 JDK 1.8 主要进行了哪些优化?

二狗:除了 HashMap,还用过哪些 Map,在使用时怎么选择?

二狗:(不妙,这个 B HashMap 懂得比我还多,得赶紧溜)到时间和女朋友吃饭了,我们之后再分胜负。

推荐阅读



前言


某日,囧辉和同事二狗决定就谁是“&#*大厦1111室(只有囧辉和二狗两人HashMap最强者展开一番较量。画面过于血腥,成年人请在未成年人陪同下观看。

image.png


正文


二狗:天天听你憨逼吹牛,是时候让你知道什么叫残忍了。


囧辉:二狗子,这屎可以乱吃,这话不能乱说哦。

image.png

二狗:先来点简单的,介绍下HashMap 的底层数据结构吧。


囧辉:我们现在用的都是 JDK 1.8,底层是由数组+链表+红黑树组成,如下图,而在 JDK 1.8 之前是由数组+链表组成。

image.png

二狗:为什么要改成“数组+链表+红黑树”?


囧辉:主要是为了提升在hash冲突严重时(链表过长)的查找性能,使用链表的查找性能是 O(n),而使用红黑树是 O(logn)


二狗:那在什么时候用链表?什么时候用红黑树?


囧辉:对于插入,默认情况下是使用链表节点。当同一个索引位置的节点在新增后达到9个(阈值8:如果此时数组长度大于等于64,则会触发链表节点转红黑树节点(treeifyBin);而如果数组长度小于64,则不会触发链表转红黑树,而是会进行扩容,因为此时的数据量还比较小。

对于移除,当同一个索引位置的节点在移除后达到6 ,并且该索引位置的节点为红黑树节点,会触发红黑树节点转链表节点(untreeify)。


二狗:为什么链表转红黑树的阈值是8


囧辉:我们平时在进行方案设计时,必须考虑的两个很重要的因素是:时间和空间。对于 HashMap 也是同样的道理,简单来说,阈值为8是在时间和空间上权衡的结果(B 我装定了)。

网络异常,图片无法展示
|

红黑树节点大小约为链表节点的2倍,在节点太少时,红黑树的查找性能优势并不明显,付出2倍空间的代价作者觉得不值得。


理想情况下,使用随机的哈希码,节点分布在 hash 桶中的频率遵循泊松分布,按照泊松分布的公式计算,链表中节点个数为8时的概率为 0.00000006跟大乐透一等奖差不多,中大乐透?不存在的),这个概率足够低了,并且到8个节点时,红黑树的性能优势也会开始展现出来,因此8是一个较合理的数字。


二狗:(呦呦呦,时间和空间上权衡的结果,还装起B来了)那为什么转回链表节点是用的6而不是复用8


囧辉:如果我们设置节点多于8个转红黑树,少于8个就马上转链表,当节点个数在8徘徊时,就会频繁进行红黑树和链表的转换,造成性能的损耗。


二狗:(小菜鸡,懂得还不少)那 HashMap 有哪些重要属性?分别用于做什么的?


囧辉:除了用来存储我们的节点 table 数组外,HashMap 还有以下几个重要属性:1sizeHashMap 已经存储的节点个数;2threshold:扩容阈值,当 HashMap 的个数达到该值,触发扩容。3loadFactor:负载因子,扩容阈值 = 容量* 负载因子。


二狗:threshold 除了用于存放扩容阈值还有其他作用吗?


囧辉:在我们新建 HashMap 对象时, threshold 还会被用来存初始化时的容量。HashMap 直到我们第一次插入节点时,才会对 table 进行初始化,避免不必要的空间浪费。


二狗:HashMap 的默认初始容量是多少?HashMap 的容量有什么限制吗?


囧辉:默认初始容量是16HashMap 的容量必须是2N次方,HashMap会根据我们传入的容量计算一个大于等于该容量的最小的2N次方,例如传 9,容量为16


二狗:(你他娘的是在绕口令吧)你这个*@%#&N次方是怎么算的?


囧辉:Talk is cheap. Show you the code

static final int tableSizeFor(int cap) {
    int n = cap - 1;
    n |= n >>> 1;
    n |= n >>> 2;
    n |= n >>> 4;
    n |= n >>> 8;
    n |= n >>> 16;
    return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
}

二狗:卧槽,还彪英文,来来来,这代码你给我解释下。


囧辉:我们先不看第一行“int n = cap - 1”,先看下面的5行计算。

|=(或等于):这个符号比较少见,但是“+=”应该都见过,看到这你应该明白了。例如:a |= b ,可以转成:a = a | b

image.png

>>>(无符号右移):例如 a >>> b 指的是将a 向右移动 b 指定的位数,右移后左边空出的位用零来填充,移出右边的位被丢弃。

image.png

假设n 的值为 0010 0001,则该计算如下图:

image.png

相信你应该看出来,这5个公式会通过最高位的1,拿到214181161321。当然,有多少个1,取决于我们的入参有多大,但我们肯定的是经过这5个计算,得到的值是一个低位全是1的值,最后返回的时候 +1,则会得到1个比n 大的 2 N次方。

这时再看开头的cap - 1 就很简单了,这是为了处理 cap 本身就是 2 N次方的情况。

计算机底层是二进制的,移位和或运算是非常快的,所以这个方法的效率很高。

PS:这是 HashMap 中我个人最喜欢的设计,非常巧妙,真想给作者一个么么哒(不小心暴露了)。

image.png

二狗:(这叼毛讲的还凑合啊,连我都听懂了)你说 HashMap 的容量必须是 2 N 次方,这是为什么?


囧辉:计算索引位置的公式为:(n - 1) & hash,当 n 2 N次方时,n - 1 为低位全是 1 的值,此时任何值跟n - 1 进行 & 运算的结果为该值的低 N 位,达到了和取模同样的效果,实现了均匀分布。实际上,这个设计就是基于公式:x mod 2^n = x & (2^n - 1),因为& 运算比 mod 具有更高的效率。

如下图,当n 不为 2 N 次方时,hash 冲突的概率明显增大。

image.png

二狗:你说 HashMap 的默认初始容量是 16,为什么是16而不是其他的?

囧辉:(这是什么煞笔问题)我认为是16的原因主要是:162N次方,并且是一个较合理的大小。如果用832,我觉得也是OK的。实际上,我们在新建 HashMap 时,最好是根据自己使用情况设置初始容量,这才是最合理的方案。

image.png

二狗:刚才说的负载因子默认初始值又是多少?


囧辉:负载因子默认值是0.75


二狗:为什么是0.75而不是其他的?


囧辉:(又问这种憨逼问题)这个也是在时间和空间上权衡的结果。如果值较高,例如1,此时会减少空间开销,但是 hash 冲突的概率会增大,增加查找成本;而如果值较低,例如 0.5,此时 hash 冲突会降低,但是有一半的空间会被浪费,所以折衷考虑 0.75似乎是一个合理的值。


二狗:为什么不是 0.74 0.76


囧辉:

image.png

二狗:那我们换个问题问吧,HashMap的插入流程是怎么样的?

image.png

囧辉:Talk is cheap. Show you the picture

image.png

image.png


二狗:图里刚开始有个计算 key hash 值,是怎么设计的?


囧辉:拿到key hashCode,并将 hashCode 的高16位和hashCode 进行异或(XOR)运算,得到最终的 hash 值。

static final int hash(Object key) {
    int h;
    return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
}

二狗:为什么要将 hashCode 的高16位参与运算?


囧辉:主要是为了在 table 的长度较小的时候,让高位也参与运算,并且不会有太大的开销。


例如下图,如果不加入高位运算,由于 n - 1 0000 0111,所以结果只取决于 hash 值的低3位,无论高位怎么变化,结果都是一样的。

image.png

如果我们将高位参与运算,则索引计算结果就不会仅取决于低位。

image.png

image.png

二狗:扩容(resize)流程介绍下?

囧辉:

image.png

image.png

二狗:红黑树和链表都是通过 e.hash & oldCap == 0 来定位在新表的索引位置,这是为什么?

囧辉:请看对下面的例子。

扩容前 table 的容量为16a节点和 b 节点在扩容前处于同一索引位置。

image.png

扩容后,table长度为32,新表的 n - 1 只比老表的 n - 1 在高位多了一个1(图中标红)。

image.png

因为 2个节点在老表是同一个索引位置,因此计算新表的索引位置时,只取决于新表在高位多出来的这一位(图中标红),而这一位的值刚好等于 oldCap

因为只取决于这一位,所以只会存在两种情况:1  (e.hash & oldCap) == 0 ,则新表索引位置为原索引位置2(e.hash & oldCap) != 0,则新表索引位置为原索引+ oldCap 位置


二狗:HashMap是线程安全的吗?


囧辉:不是。HashMap在并发下存在数据覆盖、遍历的同时进行修改会抛出 ConcurrentModificationException 异常等问题,JDK 1.8 之前还存在死循环问题。


二狗:介绍一下死循环问题?


囧辉:导致死循环的根本原因是 JDK 1.7 扩容采用的是头插法,会导致同一索引位置的节点在扩容后顺序反掉。而JDK 1.8 之后采用的是尾插法,扩容后节点顺序不会反掉,不存在死循环问题。

JDK 1.7.0 的扩容代码如下,用例子来看会好理解点。

void transfer(Entry[] newTable) {
    Entry[] src = table;
    int newCapacity = newTable.length;
    for (int j = 0; j < src.length; j++) {
        Entry<K,V> e = src[j];
        if (e != null) {
            src[j] = null;
            do {
                Entry<K,V> next = e.next;
                int i = indexFor(e.hash, newCapacity);
                e.next = newTable[i];
                newTable[i] = e;
                e = next;
            } while (e != null);
        }
    }
}

PS:这个流程较难理解,建议对着代码自己模拟走一遍。

例子:我们有1个容量为2HashMaploadFactor=0.75,此时线程1和线程2同时往该 HashMap 插入一个数据,都触发了扩容流程,接着有以下流程。

1)在2个线程都插入节点,触发扩容流程之前,此时的结构如下图。

image.png

2)线程1进行扩容,执行到代码:Entry next = e.next 后被调度挂起,此时的结构如下图。

image.png

3)线程1被挂起后,线程2进入扩容流程,并走完整个扩容流程,此时的结构如下图。

image.png


由于两个线程操作的是同一个 table,所以该图又可以画成如下图。

image.png

4)线程1恢复后,继续走完第一次的循环流程,此时的结构如下图。

image.png

5)线程1继续走完第二次循环,此时的结构如下图。

image.png

6)线程1继续执行第三次循环,执行到 e.next = newTable[i] 时形成环,执行完第三次循环的结构如下图。


如果此时线程1调用map.get(11) ,悲剧就出现了——Infinite Loop


二狗:(尼玛,没听懂,尴尬了)那总结下 JDK 1.8 主要进行了哪些优化?


囧辉:JDK 1.8 的主要优化刚才我们都聊过了,主要有以下几点:


1)底层数据结构从数组+链表改成数组+链表+红黑树,主要是优化了 hash 冲突较严重时,链表过长的查找性能:O(n) -> O(logn)


2)计算 table 初始容量的方式发生了改变,老的方式是从1开始不断向左进行移位运算,直到找到大于等于入参容量的值;新的方式则是通过“5个移位+或等于运算来计算。

// JDK 1.7.0
public HashMap(int initialCapacity, float loadFactor) {
    // 省略
    // Find a power of 2 >= initialCapacity
    int capacity = 1;
    while (capacity < initialCapacity)
        capacity <<= 1;
    // ... 省略
}
// JDK 1.8.0_191
static final int tableSizeFor(int cap) {
    int n = cap - 1;
    n |= n >>> 1;
    n |= n >>> 2;
    n |= n >>> 4;
    n |= n >>> 8;
    n |= n >>> 16;
    return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
}

3)优化了 hash 值的计算方式,老的通过一顿瞎JB操作,新的只是简单的让高16位参与了运算。

// JDK 1.7.0
static int hash(int h) {
    h ^= (h >>> 20) ^ (h >>> 12);
    return h ^ (h >>> 7) ^ (h >>> 4);
}
// JDK 1.8.0_191
static final int hash(Object key) {
    int h;
    return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
}

4)扩容时插入方式从头插法改成尾插法,避免了并发下的死循环。

5)扩容时计算节点在新表的索引位置方式从“h & (length-1)”改成“hash & oldCap”,性能可能提升不大,但设计更巧妙、更优雅。

二狗:除了 HashMap,还用过哪些 Map,在使用时怎么选择?


囧辉:

image.png

二狗:(不妙,这个 B HashMap 懂得比我还多,得赶紧溜)到时间和女朋友吃饭了,我们之后再分胜负。

囧辉:

image.png


越努力,越幸运。转发【朋友圈】【收藏】【点赞】,是对囧辉最大的支持。


推荐阅读


Java 基础高频面试题(2021年最新版)

921天,咸鱼到阿里的修仙之路

两年Java开发工作经验面试总结

4 Java 经验,阿里网易拼多多面试总结、心得体会

5 Java 经验,字节、美团、快手核心部门面试总结(真题解析)

复习2个月拿下美团offer,我都做了些啥

如何写一份让 HR 眼前一亮的简历(附模板)

面试阿里,HashMap 这一篇就够了

面试必问的 MySQL,你懂了吗?

面试必问的线程池,你懂了吗?

跳槽,如何选择一家公司

如何准备好一场大厂面试

面试必问的分布式锁,你懂了吗?

相关文章
|
3月前
|
Python 开发工具
2024年Python最全使用Python实现音频双通道分离,2024年最新阿里p7面试难度
2024年Python最全使用Python实现音频双通道分离,2024年最新阿里p7面试难度
2024年Python最全使用Python实现音频双通道分离,2024年最新阿里p7面试难度
|
3月前
|
机器学习/深度学习 Python 算法
最新【Python 百练成钢】时间调整、二进制数、回文素数、字母距离(1),2024年最新2024年阿里Python岗面试必问
最新【Python 百练成钢】时间调整、二进制数、回文素数、字母距离(1),2024年最新2024年阿里Python岗面试必问
最新【Python 百练成钢】时间调整、二进制数、回文素数、字母距离(1),2024年最新2024年阿里Python岗面试必问
|
3月前
|
数据采集 SQL 数据挖掘
2024年8个Python高效数据分析的技巧_python 数据分析 效率,2024年最新阿里社招p7面试几轮
2024年8个Python高效数据分析的技巧_python 数据分析 效率,2024年最新阿里社招p7面试几轮
|
5天前
|
存储 安全 Java
一天十道Java面试题----第二天(HashMap和hashTable的区别--------》sleep、wait、join)
这篇文章是关于Java面试的第二天笔记,涵盖了HashMap与HashTable的区别、ConcurrentHashMap的实现原理、IOC容器的实现方法、字节码的概念和作用、Java类加载器的类型、双亲委派模型、Java异常体系、GC如何判断对象可回收、线程的生命周期及状态,以及sleep、wait、join、yield的区别等十道面试题。
一天十道Java面试题----第二天(HashMap和hashTable的区别--------》sleep、wait、join)
|
3月前
|
PHP Python
最新【Python】 实现循环最快的方式_python while循环加速,2024年最新阿里php面试题
最新【Python】 实现循环最快的方式_python while循环加速,2024年最新阿里php面试题
|
16天前
|
JavaScript
给原始数据类型加属性和方法为什么不会报错?包装类——阿里面试题
给原始数据类型加属性和方法为什么不会报错?包装类——阿里面试题
|
3月前
|
算法 Java 应用服务中间件
阿里面试:说说自适应限流?
限流想必大家都不陌生,它是一种控制资源访问速率的策略,用于保护系统免受过载和崩溃的风险。限流可以控制某个服务、接口或系统在一段时间内能够处理的请求或数据量,以防止系统资源耗尽、性能下降或服务不可用。 常见的限流策略有以下几种: 1. **令牌桶算法**:基于令牌桶的方式,限制每个单位时间内允许通过的请求量,请求量超出限制的将被拒绝或等待。 2. **漏桶算法**:基于漏桶的方式,限制系统处理请求的速率,请求速率过快时将被限制或拒绝。 3. **计数器算法**:通过计数器记录单位时间内的请求次数,并根据设定的阈值进行限制。 通过合理的限流策略,可以保护系统免受恶意攻击、突发流量和资源
44 4
阿里面试:说说自适应限流?
|
1月前
|
存储 安全 Java
Java面试题:请解释Java内存模型,并说明如何在多线程环境下使用synchronized关键字实现同步,阐述ConcurrentHashMap与HashMap的区别,以及它如何在并发环境中提高性能
Java面试题:请解释Java内存模型,并说明如何在多线程环境下使用synchronized关键字实现同步,阐述ConcurrentHashMap与HashMap的区别,以及它如何在并发环境中提高性能
21 0
|
1月前
|
消息中间件 前端开发 NoSQL
阿里面试:说说@Async实现原理?
阿里面试:说说@Async实现原理?
18 0
|
2月前
|
消息中间件 存储 缓存
面试题--HashMap和TreeMap的区别和应用场景有啥区别?
然后底层调用key的hashCode()方法得出hash值; 过哈希表哈希算法,将hash值转换成数组的下标(注1),下标位置上如果没有任何元素,就把Node添加到这个位置上。如果说下标对应的位置上有值。此时,就会拿着key和链表上每个节点的key进行equal。如果所有的equals方法返回都是false,那么这个新的节点将被添加到链表的末尾。如其中有一个equals返回了true,那么这个节点的value将会被覆盖,如果最终长度大于8就会转成红黑树,红黑树插入;
29 3