• Java 集合:(二十四)HashMap 万万没想到系列——HashMap实现底层细节之keySet,values,entrySet的一个底层实现细节


    一、问题描述

      最近看HashMap源码的时候发现了一个没思考过的问题,在这次之前可以说是完全没有思考过,所以一开始对这个点有疑问的时候,也没有想到居然有这么个语法细节存在,弄得我百思不得其解,直到自己动手做实验改写了代码才完全明白。

      HashMap里面保存的数据最底层是一个Entry型的数组,这个Entry则保留了一个键值对,还有一个指向下一个Entry的指针。所以HashMap是一种结合了数组和链表的结构。

      正因为如此,你有3种对数据的观测方式:keySet,values,entrySet。

      第一个是体现从key的值角度出发的结果。它里面包含了这个键值对表里面的所有键的值的集合,因为HashMap明确规定一个键只能对应一个值,所以不会有重复的key存在,这也就是为什么可以用Set集合来装key。

      第二个values则是从键值对的值的角度看这个映射表,因为可以有多个key对应一个值,所以可能有多个相同的values(这个观点和函数的观点相似)。

      第三个角度是最基本的角度,也就是从键值对的角度思考这个问题。它返回一个键值对的集合。(键值对相等当且仅当键和值都相等)。

    二、源码分析

      在此基础上,java的源码:(这里我只用了keySet说明这个问题)

     1     public Set<K> keySet() {
     2         Set<K> ks = keySet;
     3         if (ks == null) {
     4             ks = new KeySet();
     5             keySet = ks;
     6         }
     7         return ks;
     8     }
     9     
    10     final class KeySet extends AbstractSet<K> {
    11         public final int size()                 { return size; }
    12         public final void clear()               { HashMap.this.clear(); }
    13         public final Iterator<K> iterator()     { return new KeyIterator(); }
    14         public final boolean contains(Object o) { return containsKey(o); }
    15         public final boolean remove(Object key) {
    16             return removeNode(hash(key), key, null, false, true) != null;
    17         }
    18         public final Spliterator<K> spliterator() {
    19             return new KeySpliterator<>(HashMap.this, 0, -1, 0, 0);
    20         }
    21         public final void forEach(Consumer<? super K> action) {
    22             Node<K,V>[] tab;
    23             if (action == null)
    24                 throw new NullPointerException();
    25             if (size > 0 && (tab = table) != null) {
    26                 int mc = modCount;
    27                 for (int i = 0; i < tab.length; ++i) {
    28                     for (Node<K,V> e = tab[i]; e != null; e = e.next)
    29                         action.accept(e.key);
    30                 }
    31                 if (modCount != mc)
    32                     throw new ConcurrentModificationException();
    33             }
    34         }
    35     }

      看上去简单明了,可是我发现了一个细节并且与之纠缠了一个下午(这个语法细节隐藏的很深)。

      这个地方我们可以看到,当向一个HashMap调用keySet()方法的时候就是返回一个集合,其内容是所有的key的值。可是问题是这个地方到底是怎么实现的。

      从代码可以看到这个地方直接返回了一个叫keySet的东西。那么这个东西究竟是什么呢?按住Ctrl键可以直接去看这个变量声明的地方:

      在AbstractMap.class里面:

        transient Set<K>        keySet;
        transient Collection<V> values;
    

      

      也就是说,这个地方是从HashMap的父类AbstractMap里面继承过来的两个集合类型(第一个就是我说的keySet,第二个和这个完全一样的过程)。

      可是问题还是没有解决,这个keySet为什么能返回当前HashMap的key的值得集合呢?

      我一开始只是抱着“简单看看”的想法来看这个地方,因为我的想象是可能能在哪里找到一个显而易见的同步方法,使得keySet的里面的值随着table(这也就是那个基础数组,储存了所有的键值对Entry)的值变化而变化。可是我发现:“并没有”。

      第一时间我觉得我可能没有找对位置,因为一般它提供的这些类的继承关系比较复杂,可能不在这个地方,可能在别的地方实现了,可是我翻来覆去找半天确实发现没有,也就是说:“没有明确的代码让keySet同步HashMap”。这下问题就变大了,事实上如果你在AbstractMap里面找只找得到如下代码:

     1     public Set<K> keySet() {
     2         Set<K> ks = keySet;
     3         if (ks == null) {
     4             ks = new AbstractSet<K>() {
     5                 public Iterator<K> iterator() {
     6                     return new Iterator<K>() {
     7                         private Iterator<Entry<K,V>> i = entrySet().iterator();
     8 
     9                         public boolean hasNext() {
    10                             return i.hasNext();
    11                         }
    12 
    13                         public K next() {
    14                             return i.next().getKey();
    15                         }
    16 
    17                         public void remove() {
    18                             i.remove();
    19                         }
    20                     };
    21                 }
    22 
    23                 public int size() {
    24                     return AbstractMap.this.size();
    25                 }
    26 
    27                 public boolean isEmpty() {
    28                     return AbstractMap.this.isEmpty();
    29                 }
    30 
    31                 public void clear() {
    32                     AbstractMap.this.clear();
    33                 }
    34 
    35                 public boolean contains(Object k) {
    36                     return AbstractMap.this.containsKey(k);
    37                 }
    38             };
    39             keySet = ks;
    40         }
    41         return ks;
    42     }

      看上去完全不是一个同步过程,至少在我的理解中把一个容器的东西搬运到另外一个容器需要用循环把东西一个一个搬运过去,哪怕只是浅拷贝把指针的值丢过去。这一节代码怎么看都和“让keySet这个set持有table里面的key的值的集合”没有任何关系。但是确确实实是这个地方实现了同步

    三、实验

      1、实验一

     1 public class MapTest {
     2     public static void main(String[] args) {
     3         IteratorTest iteratorTest = new IteratorTest();
     4         Set<Integer> set = iteratorTest.keySet();
     5         System.out.println(set);
     6 
     7     }
     8 }
     9 
    10 class IteratorTest {
    11     public Set<Integer> keySet() {
    12         final ArrayList<Integer> result = new ArrayList<>();
    13         result.add(1);
    14         result.add(2);
    15         result.add(3);
    16         result.add(4);
    17         result.add(5);
    18 
    19 
    20         Set<Integer> keySet = new AbstractSet<Integer>() {
    21 
    22             @Override
    23             public Iterator<Integer> iterator() {
    24                 return new Iterator<Integer>() {
    25 
    26                     private Iterator<Integer> i = result.iterator();
    27 
    28                     @Override
    29                     public boolean hasNext() {
    30                         return i.hasNext();
    31                     }
    32 
    33                     @Override
    34                     public Integer next() {
    35                         return i.next();
    36                     }
    37 
    38                     @Override
    39                     public void remove() {
    40                         i.remove();
    41                     }
    42                 };
    43             }
    44 
    45             @Override
    46             public int size() {
    47                 return 0;
    48             }
    49         };
    50 
    51         return keySet;
    52     }
    53 }

        运行结果:

    [1, 2, 3, 4, 5]

        为什么呢?这个地方的代码是按照HashMap的代码改写的,我再改写一下如下所示:

      2、实验二

     1 public class AbstractSetTest {
     2     public static void main(String[] args) {
     3         ArrayList<Integer> result = new ArrayList<>();
     4         result.add(1);
     5         result.add(2);
     6         result.add(3);
     7         result.add(4);
     8         result.add(5);
     9 
    10         MySet mySet = new MySet(result.iterator());
    11         System.out.println(mySet);
    12     }
    13 }
    14 
    15 class MySet extends AbstractSet<Integer> {
    16 
    17     private Iterator<Integer> iter;
    18 
    19     public MySet() {
    20     }
    21 
    22     public MySet(Iterator<Integer> iter) {
    23         this.iter = iter;
    24     }
    25 
    26     @Override
    27     public Iterator<Integer> iterator() {
    28         return iter;
    29     }
    30 
    31     @Override
    32     public int size() {
    33         return 0;
    34     }
    35 }

      也是一样的效果。换句话说,直接让一个 Set 它持有一个别人的 Iterrator,它会认为自己是它。

      同时如果调试运行会发现 Set 的值真的变了。同时这么做是有问题的,调试运行的结果和直接运行不一样同时再加上一句:System.out.println(set); 会发现第一次打印了1,2,3,4, 5 第二次为null。换句话说这样的代码产生了不确定的行为。但是这代码可以说明一些问题,至少表示离问题近了。

     

      到目前为止,可以知道keySet返回的并不是个“新”的东西,所以也没有把 HashMap 里面的 key 的值一个一个放到set的这个过程,而是通过生成一个set,这个set直接和HashMap的Iterator挂钩来反映HashMap的变化。这个地方的“挂钩”的具体过程是keySet继承了AbstractSet这个抽象类,这个抽象类需要重写iterator() 方法。

      

    四、再看源码

      具体的代码调用过程如下:

      当你调用HashMap的keySet()方法的时候:

     1     public Set<K> keySet() {
     2         Set<K> ks = keySet;
     3         if (ks == null) {
     4             ks = new KeySet();
     5             keySet = ks;
     6         }
     7         return ks;
     8     }
     9 
    10     final class KeySet extends AbstractSet<K> {
    11         public final int size()                 { return size; }
    12         public final void clear()               { HashMap.this.clear(); }
    13         public final Iterator<K> iterator()     { return new KeyIterator(); }
    14         public final boolean contains(Object o) { return containsKey(o); }
    15         public final boolean remove(Object key) {
    16             return removeNode(hash(key), key, null, false, true) != null;
    17         }
    18         public final Spliterator<K> spliterator() {
    19             return new KeySpliterator<>(HashMap.this, 0, -1, 0, 0);
    20         }
    21         public final void forEach(Consumer<? super K> action) {
    22             Node<K,V>[] tab;
    23             if (action == null)
    24                 throw new NullPointerException();
    25             if (size > 0 && (tab = table) != null) {
    26                 int mc = modCount;
    27                 for (int i = 0; i < tab.length; ++i) {
    28                     for (Node<K,V> e = tab[i]; e != null; e = e.next)
    29                         action.accept(e.key);
    30                 }
    31                 if (modCount != mc)
    32                     throw new ConcurrentModificationException();
    33             }
    34         }
    35     }

      可见:会返回一个名字叫keySet的Set。但是这个keySet如上面所写的是来自AbstractMap的一个引用。

      我前面思路错的原因是因为我一直认为需要去AbstractMap里面找它的具体实现,其实不是的。

      这个ks的第一次初始化就反映了问题的本质是通过引用。看它的初始化过程:返回了一个“newKeyIterator();”对象。那么这个对象是什么呢?

      再往前的代码:

      JDK7中:

     1     public Iterator<K> iterator() {
     2         return newKeyIterator();
     3     }
     4     
     5     Iterator<K> newKeyIterator()   {
     6         return new KeyIterator();
     7     }
     8     
     9     private final class KeyIterator extends HashIterator<K> {
    10         public K next() {
    11             return nextEntry().getKey();
    12         }
    13     }

       JDK8 中:

    1     public final Iterator<K> iterator(){
    2         return new KeyIterator(); 
    3     }
    4     final class KeyIterator extends HashIterator
    5         implements Iterator<K> {
    6         public final K next() { return nextNode().key; }
    7     }

      

      它调用了一个方法返回了一个 KeyIterator 对象。这个对象的代码如上所示。

      它又基础自HashIterator。看上去这个过程比较复杂,其实看源代码的话可以很清楚它的意图:keySet和values和entrySet本质既然一样,就可以通过封装其相同的部分(也就是这里的HashIterator),再各自实现最重要的next方法。

      这是HashIterator的源代码:

     1     abstract class HashIterator {
     2         Node<K,V> next;        // next entry to return
     3         Node<K,V> current;     // current entry
     4         int expectedModCount;  // for fast-fail
     5         int index;             // current slot
     6 
     7         HashIterator() {
     8             expectedModCount = modCount;
     9             Node<K,V>[] t = table;
    10             current = next = null;
    11             index = 0;
    12             if (t != null && size > 0) { // advance to first entry
    13                 do {} while (index < t.length && (next = t[index++]) == null);
    14             }
    15         }
    16 
    17         public final boolean hasNext() {
    18             return next != null;
    19         }
    20 
    21         final Node<K,V> nextNode() {
    22             Node<K,V>[] t;
    23             Node<K,V> e = next;
    24             if (modCount != expectedModCount)
    25                 throw new ConcurrentModificationException();
    26             if (e == null)
    27                 throw new NoSuchElementException();
    28             if ((next = (current = e).next) == null && (t = table) != null) {
    29                 do {} while (index < t.length && (next = t[index++]) == null);
    30             }
    31             return e;
    32         }
    33 
    34         public final void remove() {
    35             Node<K,V> p = current;
    36             if (p == null)
    37                 throw new IllegalStateException();
    38             if (modCount != expectedModCount)
    39                 throw new ConcurrentModificationException();
    40             current = null;
    41             K key = p.key;
    42             removeNode(hash(key), key, null, false, false);
    43             expectedModCount = modCount;
    44         }
    45     }

      可见,对于迭代器的操作,其实都是根据底层的table来实现的,也就是直接操作键值对。在得到Entry之后再获得它的key或者value。正因为如此,迭代器的底层直接根据table进行操作,所以如果有别的容器持有了这个迭代器内部类,就可以直接实现同步中的可见性:对HashMap的改变体现在table,而传递出去的内部类可以访问table。

      而这之所以可以实现的更底层一步的地方是迭代器的具体实现。一方面它是一个内部类可以直接访问HashMap的table,另外一个方面是它用了类似指针的next引用,也就可以实现迭代。这种暴露一个内部类来实现外部访问的方式我还真是第一次具体见到。

      到这里我们就可以明白这整个过程了。

       参考文章:

        https://www.cnblogs.com/dsj2016/p/5551059.html

        

  • 相关阅读:
    0129 System类 Math类 Arrays类 大数据运算
    0127 基本类型包装类
    'telnet' 不是内部或外部命令,也不是可运行的程序 解决方案
    删除时报org.springframework.dao.DataIntegrityViolationException
    mapper自动识别驼峰配置 spring MVC
    spring Security如何debug源码
    公司tomcat项目启动
    java.util.ConcurrentModificationException: null 异常解决
    @Transactional 学习
    mangoDB初探
  • 原文地址:https://www.cnblogs.com/niujifei/p/14750668.html
Copyright © 2020-2023  润新知