Java 8 ConcurrentHashMap源码中竟然隐藏着两个Bug

开发 后端
Java 8中ConcurrentHashMap的实现通过一些巧妙的设计和技巧,避开了自旋锁的局限,提供了更高的并发性能。

[[396219]]

 Java 7的ConcurrenHashMap的源码我建议大家都看看,那个版本的源码就是Java多线程编程的教科书。在Java 7的源码中,作者对悲观锁的使用非常谨慎,大多都转换为自旋锁加volatile获得相同的语义,即使最后迫不得已要用,作者也会通过各种技巧减少锁的临界区。在上一篇文章中我们也有讲到,自旋锁在临界区比较小的时候是一个较优的选择是因为它避免了线程由于阻塞而切换上下文,但本质上它也是个锁,在自旋等待期间只有一个线程能进入临界区,其他线程只会自旋消耗CPU的时间片。Java 8中ConcurrentHashMap的实现通过一些巧妙的设计和技巧,避开了自旋锁的局限,提供了更高的并发性能。如果说Java 7版本的源码是在教我们如何将悲观锁转换为自旋锁,那么在Java 8中我们甚至可以看到如何将自旋锁转换为无锁的方法和技巧。

把书读薄

image

图片来源:https://www.zhenchao.org/2019/01/31/java/cas-based-concurrent-hashmap/

在开始本文之前,大家首先在心里还是要有这样的一张图,如果有同学对HashMap比较熟悉,那这张图也应该不会陌生。事实上在整体的数据结构的设计上Java 8的ConcurrentHashMap和HashMap基本上是一致的。

Java 7中ConcurrentHashMap为了提升性能使用了很多的编程技巧,但是引入Segment的设计还是有很大的改进空间的,Java 7中ConcurrrentHashMap的设计有下面这几个可以改进的点:

    1.  Segment在扩容的时候非扩容线程对本Segment的写操作时都要挂起等待的

    2.  对ConcurrentHashMap的读操作需要做两次哈希寻址,在读多写少的情况下其实是有额外的性能损失的

    3.  尽管size()方法的实现中先尝试无锁读,但是如果在这个过程中有别的线程做写入操作,那调用size()的这个线程就会给整个ConcurrentHashMap加锁,这是整个ConcurrrentHashMap唯一一个全局锁,这点对底层的组件来说还是有性能隐患的

    4.  极端情况下(比如客户端实现了一个性能很差的哈希函数)get()方法的复杂度会退化到O(n)。

针对1和2,在Java 8的设计是废弃了Segment的使用,将悲观锁的粒度降低至桶维度,因此调用get的时候也不需要再做两次哈希了。size()的设计是Java 8版本中最大的亮点,我们在后面的文章中会详细说明。至于红黑树,这篇文章仍然不做过多阐述。接下来的篇幅会深挖细节,把书读厚,涉及到的模块有:初始化,put方法, 扩容方法transfer以及size()方法,而其他模块,比如hash函数等改变较小,故不再深究。

准备知识

ForwardingNode 

  1. static final class ForwardingNode<K,V> extends Node<K,V> {  
  2.     final Node<K,V>[] nextTable;  
  3.     ForwardingNode(Node<K,V>[] tab) {  
  4.         // MOVED = -1,ForwardingNode的哈希值为-1  
  5.         super(MOVED, null, null, null);  
  6.         this.nextTable = tab 
  7.     }  

除了普通的Node和TreeNode之外,ConcurrentHashMap还引入了一个新的数据类型ForwardingNode,我们这里只展示他的构造方法,ForwardingNode的作用有两个:

  •  在动态扩容的过程中标志某个桶已经被复制到了新的桶数组中
  •  如果在动态扩容的时候有get方法的调用,则ForwardingNode将会把请求转发到新的桶数组中,以避免阻塞get方法的调用,ForwardingNode在构造的时候会将扩容后的桶数组nextTable保存下来。

UNSAFE.compareAndSwap***

这是在Java 8版本的ConcurrentHashMap实现CAS的工具,以int类型为例其方法定义如下: 

  1. /**  
  2. * Atomically update Java variable to <tt>x</tt> if it is currently  
  3. * holding <tt>expected</tt> 
  4. * @return <tt>true</tt> if successful  
  5. */  
  6. public final native boolean compareAndSwapInt(Object o, long offset,  
  7.                                               int expected,  
  8.                                               int x); 

相应的语义为:

如果对象o起始地址偏移量为offset的值等于expected,则将该值设为x,并返回true表明更新成功,否则返回false,表明CAS失败

初始化 

  1. public ConcurrentHashMap(int initialCapacity, float loadFactor, int concurrencyLevel) {  
  2.     if (!(loadFactor > 0.0f) || initialCapacity < 0 || concurrencyLevel <= 0) // 检查参数  
  3.         throw new IllegalArgumentException();  
  4.     if (initialCapacity < concurrencyLevel 
  5.         initialCapacity = concurrencyLevel 
  6.     long size = (long)(1.0 + (long)initialCapacity / loadFactor);  
  7.     int cap = (size >= (long)MAXIMUM_CAPACITY) ?  
  8.         MAXIMUM_CAPACITY : tableSizeFor((int)size); // tableSizeFor,求不小于size的 2^n的算法,jdk1.8的HashMap中说过  
  9.     this.sizeCtl = cap;   

即使是最复杂的一个初始化方法代码也是比较简单的,这里我们只需要注意两个点:

  •  concurrencyLevel在Java 7中是Segment数组的长度,由于在Java 8中已经废弃了Segment,因此concurrencyLevel只是一个保留字段,无实际意义
  •  sizeCtl这个值第一次出现,这个值如果等于-1则表明系统正在初始化,如果是其他负数则表明系统正在扩容,在扩容时sizeCtl二进制的低十六位等于扩容的线程数加一,高十六位(除符号位之外)包含桶数组的大小信息

put方法 

  1. public V put(K key, V value) {  
  2.     return putVal(key, value, false);  

put方法将调用转发到putVal方法: 

  1. final V putVal(K key, V value, boolean onlyIfAbsent) {  
  2.     if (key == null || value == null) throw new NullPointerException();  
  3.     int hash = spread(key.hashCode());  
  4.     int binCount = 0 
  5.     for (Node<K,V>[] tab = table;;) {  
  6.         Node<K,V> f; int n, i, fh;  
  7.         // 【A】延迟初始化  
  8.         if (tab == null || (n = tab.length) == 0)  
  9.             tab = initTable();  
  10.         // 【B】当前桶是空的,直接更新  
  11.         else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) {  
  12.             if (casTabAt(tab, i, null, 
  13.                              new Node<K,V>(hash, key, value, null)))  
  14.                 break;                   // no lock when adding to empty bin  
  15.         } 
  16.         // 【C】如果当前的桶的第一个元素是一个ForwardingNode节点,则该线程尝试加入扩容  
  17.         else if ((ffh = f.hash) == MOVED)  
  18.             tab = helpTransfer(tab, f);  
  19.         // 【D】否则遍历桶内的链表或树,并插入 
  20.          else {  
  21.             // 暂时折叠起来,后面详细看  
  22.         }  
  23.     }  
  24.     // 【F】流程走到此处,说明已经put成功,map的记录总数加一  
  25.     addCount(1L, binCount);  
  26.     return null;  

从整个代码结构上来看流程还是比较清楚的,我用括号加字母的方式标注了几个非常重要的步骤,put方法依然牵扯出很多的知识点

桶数组的初始化 

  1. private final Node<K,V>[] initTable() {  
  2.     Node<K,V>[] tab; int sc;  
  3.     while ((tab = table) == null || tab.length == 0) {  
  4.         if ((sc = sizeCtl< 0 
  5.             // 说明已经有线程在初始化了,本线程开始自旋  
  6.             Thread.yield(); // lost initialization race; just spin  
  7.         else if (U.compareAndSwapInt(this, SIZECTL, sc, -1)) {  
  8.             // CAS保证只有一个线程能走到这个分支  
  9.             try {  
  10.                 if ((tab = table) == null || tab.length == 0) {  
  11.                     int n = (sc > 0) ? sc : DEFAULT_CAPACITY;  
  12.                     @SuppressWarnings("unchecked")  
  13.                     Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n];  
  14.                     tabtable = tab = nt;  
  15.                     // sc = n - n/4 = 0.75n  
  16.                     sc = n - (n >>> 2);  
  17.                 }  
  18.             } finally {  
  19.                 // 恢复sizeCtl > 0相当于释放锁  
  20.                 sizeCtl = sc 
  21.             }  
  22.             break;  
  23.         }  
  24.     }  
  25.     return tab;  

在初始化桶数组的过程中,系统如何保证不会出现并发问题呢,关键点在于自旋锁的使用,当有多个线程都执行initTable方法的时候,CAS可以保证只有一个线程能够进入到真正的初始化分支,其他线程都是自旋等待。这段代码中我们关注三点即可:

  •  依照前文所述,当有线程开始初始化桶数组时,会通过CAS将sizeCtl置为-1,其他线程以此为标志开始自旋等待
  •  当桶数组初始化结束后将sizeCtl的值恢复为正数,其值等于0.75倍的桶数组长度,这个值的含义和之前HashMap中的THRESHOLD一致,是系统触发扩容的临界点
  •  在finally语句中对sizeCtl的操作并没有使用CAS是因为CAS保证只有一个线程能够执行到这个地方

添加桶数组第一个元素 

  1. static final <K,V> Node<K,V> tabAt(Node<K,V>[] tab, int i) {  
  2.     return (Node<K,V>)U.getObjectVolatile(tab, ((long)i << ASHIFT) + ABASE);  
  3.  
  4. static final <K,V> boolean casTabAt(Node<K,V>[] tab, int i,  
  5.                                     Node<K,V> c, Node<K,V> v) {  
  6.     return U.compareAndSwapObject(tab, ((long)i << ASHIFT) + ABASE, c, v);  

put方法的第二个分支会用tabAt判断当前桶是否是空的,如果是则会通过CAS写入,tabAt通过UNSAFE接口会拿到桶中的最新元素,casTabAt通过CAS保证不会有并发问题,如果CAS失败,则通过循环再进入其他分支

判断是否需要新增线程扩容 

  1. final Node<K,V>[] helpTransfer(Node<K,V>[] tab, Node<K,V> f) {  
  2.     Node<K,V>[] nextTab; int sc;  
  3.     if (tab != null && (f instanceof ForwardingNode) &&  
  4.         (nextTab = ((ForwardingNode<K,V>)f).nextTable) != null) {  
  5.         int rs = resizeStamp(tab.length);  
  6.         while (nextTab == nextTable && table == tab &&  
  7.                 (sc = sizeCtl< 0) {  
  8.             // RESIZE_STAMP_SHIFT = 16  
  9.             if ((sc >>> RESIZE_STAMP_SHIFT) != rs || sc == rs + 1 ||  
  10.                 sc == rs + MAX_RESIZERS || transferIndex <= 0)  
  11.                 break;  
  12.             // 这里将sizeCtl的值自增1,表明参与扩容的线程数量+1  
  13.             if (U.compareAndSwapInt(this, SIZECTL, sc, sc + 1)) {  
  14.                 transfer(tab, nextTab);  
  15.                 break;  
  16.             }  
  17.         }  
  18.         return nextTab;  
  19.     }  
  20.     return table;  

在这个地方我们就要详细说下sizeCtl这个标志位了,临时变量rs由resizeStamp这个方法返回 

  1. static final int resizeStamp(int n) {  
  2.     // RESIZE_STAMP_BITS = 16  
  3.     return Integer.numberOfLeadingZeros(n) | (1 << (RESIZE_STAMP_BITS - 1));  

因为入参n是一个int类型的值,所有Integer.numberOfLeadingZeros(n)的返回值介于0到32之间,如果转换成二进制

  •  Integer.numberOfLeadingZeros(n)的最大值是:00000000 00000000 00000000 00100000
  •  Integer.numberOfLeadingZeros(n)的最小值是:00000000 00000000 00000000 00000000

因此resizeStampd的返回值也就介于00000000 00000000 10000000 00000000到00000000 00000000 10000000 00100000之间,从这个返回值的范围可以看出来resizeStamp的返回值高16位全都是0,是不包含任何信息的。因此在ConcurrrentHashMap中,会把resizeStamp的返回值左移16位拼到sizeCtl中,这就是为什么sizeCtl的高16位包含整个Map大小的原理。有了这个分析,这段代码中比较长的if判断也就能看懂了 

  1. if ((sc >>> RESIZE_STAMP_SHIFT) != rs || sc == rs + 1 ||  
  2.     sc == rs + MAX_RESIZERS || transferIndex <= 0)  
  3.     break;  
  4.     (sc >>> RESIZE_STAMP_SHIFT) != rs保证所有线程要基于同一个旧的桶数组扩容  
  5.     transferIndex <= 0已经有线程完成扩容任务了 

至于sc == rs + 1 || sc == rs + MAX_RESIZERS这两个判断条件如果是细心的同学一定会觉得难以理解,这个地方确实是JDK的一个BUG,这个BUG已经在JDK 12中修复,详细情况可以参考一下Oracle的官网:https://bugs.java.com/bugdatabase/view_bug.do?bug_id=JDK-8214427,这两个判断条件应该写成这样:sc == (rs << RESIZE_STAMP_SHIFT) + 1 || sc == (rs << RESIZE_STAMP_SHIFT) + MAX_RESIZERS,因为直接比较rs和sc是没有意义的,必须要有移位操作。它表达的含义是

  •  sc == (rs << RESIZE_STAMP_SHIFT) + 1当前扩容的线程数为0,即已经扩容完成了,就不需要再新增线程扩容
  •  sc == (rs << RESIZE_STAMP_SHIFT) + MAX_RESIZERS参与扩容的线程数已经到了最大,就不需要再新增线程扩容

真正扩容的逻辑在transfer方法中,我们后面会详细看,不过有个小细节可以提前注意,如果nextTable已经初始化了,transfer会返回nextTable的的引用,后续可以直接操作新的桶数组。

插入新值

如果桶数组已经初始化好了,该扩容的也扩容了,并且根据哈希定位到的桶中已经有元素了,那流程就跟普通的HashMap一样了,唯一一点不同的就是,这时候要给当前的桶加锁,且看代码: 

  1. final V putVal(K key, V value, boolean onlyIfAbsent) {  
  2.     if (key == null || value == null) throw new NullPointerException();  
  3.     int hash = spread(key.hashCode());  
  4.     int binCount = 0 
  5.     for (Node<K,V>[] tab = table;;) {  
  6.         Node<K,V> f; int n, i, fh;  
  7.         if (tab == null || (n = tab.length) == 0)// 折叠  
  8.         else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) {// 折叠}  
  9.         else if ((ffh = f.hash) == MOVED)// 折叠  
  10.         else {  
  11.             V oldVal = null 
  12.             synchronized (f) {  
  13.                 // 要注意这里这个不起眼的判断条件  
  14.                 if (tabAt(tab, i) == f) {  
  15.                     if (fh >= 0) { // fh>=0的节点是链表,否则是树节点或者ForwardingNode  
  16.                         binCount = 1 
  17.                         for (Node<K,V> e = f;; ++binCount) {  
  18.                             K ek;  
  19.                             if (e.hash == hash &&  
  20.                                 ((eek = e.key) == key ||  
  21.                                     (ek != null && key.equals(ek)))) {  
  22.                                 oldVal = e.val; // 如果链表中有值了,直接更新  
  23.                                 if (!onlyIfAbsent)  
  24.                                     e.val = value 
  25.                                 break;  
  26.                             }  
  27.                             Node<K,V> pred = e;  
  28.                             if ((ee = e.next) == null) {  
  29.                                 // 如果流程走到这里,则说明链表中还没值,直接连接到链表尾部  
  30.                                 pred.next = new Node<K,V>(hash, key, value, null);  
  31.                                 break;  
  32.                             }  
  33.                         }  
  34.                     }  
  35.                     // 红黑树的操作先略过  
  36.                 }  
  37.             }  
  38.         }  
  39.     }  
  40.     // put成功,map的元素个数+1  
  41.     addCount(1L, binCount);  
  42.     return null;  

这段代码中要特备注意一个不起眼的判断条件(上下文在源码上已经标注出来了):tabAt(tab, i) == f,这个判断的目的是为了处理调用put方法的线程和扩容线程的竞争。因为synchronized是阻塞锁,如果调用put方法的线程恰好和扩容线程同时操作同一个桶,且调用put方法的线程竞争锁失败,等到该线程重新获取到锁的时候,当前桶中的元素就会变成一个ForwardingNode,那就会出现tabAt(tab, i) != f的情况。

多线程动态扩容 

  1. private final void transfer(Node<K,V>[] tab, Node<K,V>[] nextTab) {  
  2.     int n = tab.length, stride;  
  3.     if ((stride = (NCPU > 1) ? (n >>> 3) / NCPU : n) < MIN_TRANSFER_STRIDE 
  4.         stride = MIN_TRANSFER_STRIDE; // subdivide range  
  5.     if (nextTab == null) {            // 初始化新的桶数组  
  6.         try {  
  7.             @SuppressWarnings("unchecked")  
  8.             Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n << 1];  
  9.             nextTab = nt 
  10.         } catch (Throwable ex) {      // try to cope with OOME  
  11.             sizeCtl = Integer.MAX_VALUE;  
  12.             return; 
  13.         }  
  14.         nextTabnextTable = nextTab;  
  15.         transferIndex = n;  
  16.     }  
  17.     int nextn = nextTab.length;  
  18.     ForwardingNode<K,V> fwd = new ForwardingNode<K,V>(nextTab);  
  19.     boolean advance = true 
  20.     boolean finishing = false; // to ensure sweep before committing nextTab  
  21.     for (int i = 0bound = 0;;) {  
  22.         Node<K,V> f; int fh;  
  23.         while (advance) {  
  24.             int nextIndex, nextBound; 
  25.             if (--i >= bound || finishing)  
  26.                 advance = false 
  27.             else if ((nextIndex = transferIndex<= 0) {  
  28.                 i = -1;  
  29.                 advance = false 
  30.             }  
  31.             else if (U.compareAndSwapInt  
  32.                         (this, TRANSFERINDEX, nextIndex,  
  33.                         nextBound = (nextIndex > stride ?  
  34.                                     nextIndex - stride : 0))) {  
  35.                 bound = nextBound 
  36.                 i = nextIndex - 1;  
  37.                 advance = false 
  38.             }  
  39.         }  
  40.         if (i < 0 || i >= n || i + n >= nextn) {  
  41.             int sc;  
  42.             if (finishing) {  
  43.                 nextTable = null 
  44.                 table = nextTab 
  45.                 sizeCtl = (n << 1) - (n >>> 1);  
  46.                 return;  
  47.             }  
  48.             if (U.compareAndSwapInt(this, SIZECTL, sc = sizeCtl, sc - 1)) {  
  49.                 // 判断是会否是最后一个扩容线程  
  50.                 if ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT 
  51.                     return;  
  52.                 finishing = advance = true;  
  53.                 i = n; // recheck before commit  
  54.             }  
  55.         }  
  56.         else if ((f = tabAt(tab, i)) == null)  
  57.             advance = casTabAt(tab, i, null, fwd);  
  58.         else if ((ffh = f.hash) == MOVED) // 只有最后一个扩容线程才有机会执行这个分支  
  59.             advance = true; // already processed  
  60.         else { // 复制过程与HashMap类似,这里不再赘述  
  61.             synchronized (f) {  
  62.                // 折叠  
  63.             }  
  64.         }  
  65.     }  

在深入到源码细节之前我们先根据下图看一下在Java 8中ConcurrentHashMap扩容的几个特点:

  •  新的桶数组nextTable是原先桶数组长度的2倍,这与之前HashMap一致
  •  参与扩容的线程也是分段将table中的元素复制到新的桶数组nextTable中
  •  桶一个桶数组中的元素在新的桶数组中均匀的分布在两个桶中,桶下标相差n(旧的桶数组的长度),这一点依然与HashMap保持一致

image-20210424202636495

各个线程之间如何通力协作

先看一个关键的变量transferIndex,这是一个被volatile修饰的变量,这一点可以保证所有线程读到的一定是最新的值。 

  1. private transient volatile int transferIndex; 

这个值会被第一个参与扩容的线程初始化,因为只有第一个参与扩容的线程才满足条件nextTab == null 

  1. if (nextTab == null) {            // initiating  
  2.     try {  
  3.         @SuppressWarnings("unchecked")  
  4.         Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n << 1];  
  5.         nextTab = nt 
  6.     } catch (Throwable ex) {      // try to cope with OOME  
  7.         sizeCtl = Integer.MAX_VALUE;  
  8.         return; 
  9.     }  
  10.     nextTabnextTable = nextTab;  
  11.     transferIndex = n;  

在了解了transferIndex属性的基础上,上面的这个循环就好理解了 

  1. while (advance) {  
  2.     int nextIndex, nextBound;  
  3.       // 当bound <= i <= transferIndex的时候i自减跳出这个循环继续干活  
  4.     if (--i >= bound || finishing)  
  5.         advance = false 
  6.     // 扩容的所有任务已经被认领完毕,本线程结束干活  
  7.     else if ((nextIndex = transferIndex<= 0) {  
  8.         i = -1;  
  9.         advance = false
  10.      }  
  11.     // 否则认领新的一段复制任务,并通过`CAS`更新transferIndex的值  
  12.     else if (U.compareAndSwapInt 
  13.                  (this, TRANSFERINDEX, nextIndex,  
  14.                 nextBound = (nextIndex > stride ?  
  15.                             nextIndex - stride : 0))) {  
  16.         bound = nextBound 
  17.         i = nextIndex - 1;  
  18.         advance = false 
  19.     }  

transferIndex就像是一个游标,每个线程认领一段复制任务的时候都会通过CAS将其更新为transferIndex - stride, CAS可以保证transferIndex可以按照stride这个步长降到0。

最后一个扩容线程需要二次确认?

对于每一个扩容线程,for循环的变量i代表要复制的桶的在桶数组中的下标,这个值的上限和下限通过游标transferIndex和步长stride计算得来,当i减小为负数,则说明当前扩容线程完成了扩容任务,这时候流程会走到这个分支: 

  1. // i >= n || i + n >= nextn现在看来取不到  
  2. if (i < 0 || i >= n || i + n >= nextn) {  
  3.     int sc;  
  4.     if (finishing) { // 【A】完成整个扩容过程  
  5.         nextTable = null 
  6.         table = nextTab 
  7.         sizeCtl = (n << 1) - (n >>> 1);   
  8.         return;  
  9.     }  
  10.     // 【B】判断是否是最后一个扩容线程,如果是,则需要重新扫描一遍桶数组,做二次确认  
  11.     if (U.compareAndSwapInt(this, SIZECTL, sc = sizeCtl, sc - 1)) {  
  12.         // (sc - 2) == resizeStamp(n) << RESIZE_STAMP_SHIFT 说明是最后一个扩容线程  
  13.         if ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT 
  14.             return;  
  15.         // 重新扫描一遍桶数组,做二次确认  
  16.         finishing = advance = true;  
  17.         i = n; // recheck before commit  
  18.     }  

因为变量finishing被初始化为false,所以当线程第一次进入这个if分支的话,会先执行注释为【B】的这个分支,同时因为sizeCtl的低16位被初始化为参与扩容的线程数加一,因此,当条件(sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT满足时,就能证明当前线程就是最后一个扩容线程了,这这时候将i置为n重新扫描一遍桶数组,并且将finishing置为true保证当桶数组被扫描结束后能够进入注释为【A】的分支结束扩容。

这里就有一个问题,按照我们前面的分析,扩容线程能够通力协作,保证各自负责的桶数组的分段不重不漏,这里为什么还需要做二次确认么?有一个开发者在concurrency-interest这个邮件列表中也关于这件事咨询了Doug Lea(地址:http://cs.oswego.edu/pipermail/concurrency-interest/2020-July/017171.html),他给出的回复是:

Yes, this is a valid point; thanks. The post-scan was needed in a previous version, and could be removed. It does not trigger often enough to matter though, so is for now another minor tweak that might be included next time CHM is updated.

虽然Doug在邮件中的措辞用了could be, not often enough等,但也确认了最后一个扩容线程的二次检查是没有必要的。具体的复制过程与HashMap类似,感兴趣的读者可以翻一下高端的面试从来不会在HashMap的红黑树上纠缠太多这篇文章。

size()方法

addCount()方法 

  1. // 记录map元素总数的成员变量  
  2. private transient volatile long baseCount; 

在put方法的最后,有一个addCount方法,因为putVal执行到此处说明已经成功新增了一个元素,所以addCount方法的作用就是维护当前ConcurrentHashMap的元素总数,在ConcurrentHashMap中有一个变量baseCount用来记录map中元素的个数,如下图所示,如果同一时刻有n个线程通过CAS同时操作baseCount变量,有且仅有一个线程会成功,其他线程都会陷入无休止的自旋当中,那一定会带来性能瓶颈。

image-20210420221407349

为了避免大量线程都在自旋等待写入baseCount,ConcurrentHashMap引入了一个辅助队列,如下图所示,现在操作baseCount的线程可以分散到这个辅助队列中去了,调用size()的时候只需要将baseCount和辅助队列中的数值相加即可,这样就实现了调用size()无需加锁。

image-20210420222306734

辅助队列是一个类型为CounterCell的数组: 

  1. @sun.misc.Contended static final class CounterCell {  
  2.     volatile long value;  
  3.     CounterCell(long x) { value = x; }  

可以简单理解为只是包装了一个long型的变量value,还需要解决一个问题是,对于某个具体的线程它是如何知道操作辅助队列中的哪个值呢?答案是下面的这个方法: 

  1. static final int getProbe() {  
  2.     return UNSAFE.getInt(Thread.currentThread(), PROBE);  

getProbe方法会返回当前线程的一个唯一身份码,这个值是不会变的,因此可以将getProbe的返回值与辅助队列的长度作求余运算得到具体的下标,它的返回值可能是0,如果返回0则需要调用ThreadLocalRandom.localInit()初始化。addCount方法中有两个细节需要注意 

  1. private final void addCount(long x, int check) {  
  2.     CounterCell[] as; long b, s;  
  3.     // 注意这里的判断条件,是有技巧的  
  4.     if ((as = counterCells) != null ||  
  5.         !U.compareAndSwapLong(this, BASECOUNT, b = baseCounts = b + x)) {  
  6.         CounterCell a; long v; int m;  
  7.         boolean uncontended = true 
  8.         if (as == null || (m = as.length - 1) < 0 ||  
  9.             (a = as[ThreadLocalRandom.getProbe() & m]) == null ||  
  10.             // 变量uncontended记录着这个CAS操作是否成功  
  11.             !(uncontended =  
  12.                 U.compareAndSwapLong(a, CELLVALUE, v = a.value, v + x))) {  
  13.             fullAddCount(x, uncontended);  
  14.             return;  
  15.         }  
  16.         if (check <= 1)  
  17.             return;  
  18.         s = sumCount();  
  19.     }  
  20.     if (check >= 0) {  
  21.         // 检查是否需要扩容,后面再详细看  
  22.     }  

细节一:

首先我们要注意方法中刚进来的if判断条件: 

  1. if ((as = counterCells) != null ||  
  2.     !U.compareAndSwapLong(this, BASECOUNT, b = baseCounts = b + x)) {  

作者在这里巧妙的运用了逻辑短路,如果(as = counterCells) != null则后面的CAS是不会执行的,为什么要这么设置呢?作者有两点考虑:

    1.  原因在于如果(as = counterCells) != null,则说明辅助队列已经初始化好了,相比于所有的线程都自旋等待baseCount这一个变量,让线程通过CAS去操作队列中的值有更大的可能性成功,因为辅助队列的最大长度为大于当前处理器个数的2的正整数幂,可以支持更大的并发

    2.  如果辅助队列还没有初始化好,直到有必要的时候再去创建队列,如何判断“必要性”呢?就看对baseCount的CAS操作能否成功,如果失败,就说明当前系统的并发已经比较高了,需要队列的辅助,否则直接操作baseCount

细节二:

只有当辅助队列已存在,且由ThreadLocalRandom.getProbe()在辅助队列中确定的位置不为null时,才对其做CAS操作,这本来是一个正常的防御性判断,但是uncontended记录了CAS是否成功,如果失败,则会在fullAddCount中调用ThreadLocalRandom.advanceProbe换一个身份码调整下当前线程在辅助队列的位置,避免所有线程都在辅助队列的同一个坑位自旋等待。

fullAddCount()方法 

  1. // See LongAdder version for explanation  
  2. // wasUncontended 记录着调用方CAS是否成功,如果失败则换一个辅助队列的元素继续CAS  
  3. private final void fullAddCount(long x, boolean wasUncontended) {  
  4.     int h;  
  5.     if ((h = ThreadLocalRandom.getProbe()) == 0) {  
  6.         ThreadLocalRandom.localInit();      // force initialization  
  7.         h = ThreadLocalRandom.getProbe();  
  8.         wasUncontended = true 
  9.     }  
  10.     boolean collide = false;                // True if last slot nonempty  
  11.     for (;;) {  
  12.         CounterCell[] as; CounterCell a; int n; long v;  
  13.         // 【A】如果辅助队列已经创建,则直接操作辅助队列  
  14.         if ((as = counterCells) != null && (n = as.length) > 0) {  
  15.             if ((a = as[(n - 1) & h]) == null) {  
  16.                 if (cellsBusy == 0) {            // Try to attach new Cell  
  17.                     CounterCell r = new CounterCell(x); // Optimistic create  
  18.                     if (cellsBusy == 0 &&  
  19.                         U.compareAndSwapInt(this, CELLSBUSY, 0, 1)) {  
  20.                         boolean created = false 
  21.                         try {               // Recheck under lock  
  22.                             CounterCell[] rs; int m, j;  
  23.                             if ((rs = counterCells) != null &&  
  24.                                 (m = rs.length) > 0 &&  
  25.                                 rs[j = (m - 1) & h] == null) {  
  26.                                 rs[j] = r;  
  27.                                 created = true 
  28.                             }  
  29.                         } finally { 
  30.                             cellsBusy = 0 
  31.                         }  
  32.                         if (created)  
  33.                             break;  
  34.                         continue;           // Slot is now non-empty  
  35.                     }  
  36.                 }  
  37.                 collide = false 
  38.             }  
  39.             else if (!wasUncontended)       // 如果调用方CAS失败了,本轮空跑,下一个循环换下标继续操作  
  40.                 wasUncontended = true;      // Continue after rehash 
  41.              else if (U.compareAndSwapLong(a, CELLVALUE, v = a.value, v + x))  
  42.                 break;  
  43.             else if (counterCells != as || n >= NCPU)   
  44.                 // 如果辅助队列长度已经超过了CPU个数,本轮空跑,下一个循环换下标继续操作  
  45.                 collide = false;            // At max size or stale  
  46.             else if (!collide) // 如果上一次操作失败了(CAS失败或者新建CounterCell失败),本轮空跑,下一个循环换下标继续操作  
  47.                 collide = true
  48.              else if (cellsBusy == 0 && // 如果连续两次操作辅助队列失败,则考虑扩容  
  49.                         U.compareAndSwapInt(this, CELLSBUSY, 0, 1)) {  
  50.                 try {  
  51.                     if (counterCells == as) {// Expand table unless stale  
  52.                         CounterCell[] rs = new CounterCell[n << 1];  
  53.                         for (int i = 0; i < n; ++i)  
  54.                             rs[i] = as[i];  
  55.                         counterCells = rs 
  56.                     }  
  57.                 } finally {  
  58.                     cellsBusy = 0 
  59.                 }  
  60.                 collide = false 
  61.                 continue;                   // Retry with expanded table  
  62.             }  
  63.             // 如果上一次操作失败或者调用方CAS失败,都会走到这里,变换要操作的辅助队列下标  
  64.             h = ThreadLocalRandom.advanceProbe(h);  
  65.         }  
  66.         // 【B】如果辅助队列还未创建,则加锁创建  
  67.         else if (cellsBusy == 0 && counterCells == as &&  
  68.                     U.compareAndSwapInt(this, CELLSBUSY, 0, 1)) {  
  69.             boolean init = false 
  70.             try {                           // Initialize table  
  71.                 if (counterCells == as) {  
  72.                     CounterCell[] rs = new CounterCell[2];  
  73.                     rs[h & 1] = new CounterCell(x);  
  74.                     counterCells = rs 
  75.                     init = true 
  76.                 }  
  77.             } finally {  
  78.                 cellsBusy = 0 
  79.             }  
  80.             if (init)  
  81.                 break;  
  82.         }  
  83.         // 【C】如果辅助队列创建失败(拿锁失败),则尝试直接操作`baseCount`  
  84.         else if (U.compareAndSwapLong(this, BASECOUNT, v = baseCount, v + x))  
  85.             break;                          // Fall back on using base  
  86.     }  

因为counterCells是一个普通的数组,因此对其的写操作,包括初始化,扩容以及元素的写都需要加锁,加锁的方式是对全局变量cellsBusy的自旋锁。先看最外层的三个分支:

  •  【B】如果辅助队列还没有创建,则加锁创建
  •  【C】如果因为拿锁失败导致辅助队列创建失败,则尝试自旋写入变量baseCount,万一真的成功了呢
  •  【A】如果辅助队列已经创建了,则直接去操作辅助队列相应的元素

注释中标注【A】的这个分支代码较多,其主要思路是如果通过CAS或者加锁操作辅助队列中的某个元素失败,则首先通过调用ThreadLocalRandom.advanceProbe(h)换一个队列中的元素继续操作,这次操作是否成功会记录在临时变量collide中。如果下一次操作还是失败,则说明此时的并发量比较大需要扩容了。如果辅助队列的长度已经超过了CPU的个数,那就不再扩容,继续换一个元素操作,因为同一时间能运行的线程数最大不会超过计算机的CPU个数。

在这个过程中有四个细节仍然需要注意:

细节一:

counterCells只是一个普通的数组,因此并不是线程安全的,所以对其写操作需要加锁保证并发安全

细节二:

加锁的时候,作者做了一个double-check的动作,我看有的文章将其解读为“类似于单例模式的double-check”,这个是不对的,作者这样做的原因我们在上一篇文章中有讲过,首先第一个检查cellsBusy == 0是流程往下走的基础,如果cellsBusy == 1则直接拿锁失败退出,调用h = ThreadLocalRandom.advanceProbe(h);更新h后重试,如果cellsBusy == 0校验通过,则调用CounterCell r = new CounterCell(x);初始化一个CounterCell,这样做是为了减少自旋锁的临界区的大小,以此来提升并发性能

细节三:

在加锁的时候先判断下cellsBusy是否为0,如果为1那直接宣告拿锁失败,为什么这么做呢?因为相比于调用UNSAFE的CAS操作,直接读取volatile的消耗更少,如果直接读取cellsBusy已经能判断出拿锁失败,那就没必要再调用耗时更多的CAS了

细节四:

对cellsBusy从0到1的更改调用了CAS但是从1置为0却只用了赋值操作,这是因为CAS可以保证能走到这条语句的只有一个线程,因此可以用赋值操作来更改cellsBusy的值。

sumCount

前面两个方法主要是把ConcurrentHashMap中的元素个数分散的记录到baseCount和辅助队列中,调用size()方法的时候只需要把这些值相加即可。 

  1. public int size() {  
  2.     long n = sumCount();  
  3.     return ((n < 0L) ? 0 :  
  4.             (n > (long)Integer.MAX_VALUE) ? Integer.MAX_VALUE :  
  5.             (int)n);  
  6.  
  7. final long sumCount() {  
  8.     CounterCell[] as = counterCells; CounterCell a;  
  9.     long sum = baseCount 
  10.     if (as != null) {  
  11.         for (int i = 0; i < as.length; ++i) {  
  12.             if ((a = as[i]) != null)  
  13.                 sum += a.value;  
  14.         }  
  15.     }  
  16.     return sum;  

后记

从代码来看Java 8对ConcurrentHashMap的优化都在点子上,理论上性能会比Java 7的ConcurrentHashMap提升不少,但是我暂时还没有找到有对比的两个版本的benchmark,如果有读者朋友做过相关的验证或者看到过有关的benchmark,也欢迎和我沟通。 

 

责任编辑:庞桂玉 来源: Java知音
相关推荐

2017-12-26 15:38:18

iMac隐藏秘密

2013-11-04 17:02:40

Windows 8.1隐藏功能

2021-10-10 15:01:09

Go 源码Github

2019-11-12 13:43:05

云计算IaaS技术

2015-12-09 16:21:41

2015-10-27 09:09:44

2022-02-07 15:24:53

iOS苹果系统

2015-10-26 09:32:16

春雨医生微信传播链

2021-05-29 10:39:21

Android 12翻译谷歌

2021-03-18 11:09:13

比特币加密货币区块链

2019-02-18 08:17:40

工业物联网IIOT物联网

2015-07-30 06:19:48

Linux云计算原生计算基金会

2021-10-11 19:01:47

CPU位运算JS

2020-06-08 10:33:09

微信朋友圈移动应用

2024-08-08 19:13:19

2015-11-19 10:59:00

2021-05-08 23:19:25

微信存储小程序

2009-10-13 08:49:02

Windows 7Bug

2020-12-11 06:24:09

数字货币支付宝微信
点赞
收藏

51CTO技术栈公众号