哈希表

旧城等待， 2021-12-22 01:21 565阅读 0赞

一、简介

如果所有的键都是小整数，那么我们可以用一个数组来实现无序的符号表，将键作为数组的索引i而数组中i（键）处储存的就是对应的值。

这样就可以快速地访问任意键的值，哈希表是这种简易方法的拓展并能够处理更加复杂类型的键。

哈希表需要用算术操作将键转换为数组的索引来访问数组中的键值对。

哈希表的查找算法主要分为两步：

第一步是用哈希函数将键转换为数组的一个索引，理想情况下不同的键都能转换为不同的索引值，但是实际上会有多个键哈希到到相同索引值上。

因此，第二步就是处理碰撞冲突的过程。这里有两种处理碰撞冲突的方法：separate chaining（拉链法）和linear probing（线性探测法）。

哈希表是算法在时间和空间上做出权衡的经典例子。

如果没有内存限制，算法可以直接将键作为数组（可能是超级大）的索引，那么所有的查找操作只需要访问一次内存即可完成。但这种理想情况一般不会出现，因为当键很多时，需要的内存太大。

如果没有时间限制，算法可以使用无序数组并进行顺序查找，这样只需要很少的内存。

哈希表使用了适度的空间和时间并在这两种极端之间找到了一种平衡。

算法只需要调整某些参数就可以在时间和空间之间做出取舍，这里需要使用概率论的经典结论来选择适当的参数。

概率论是数学分析中的重大成果，哈希表利用了这些知识。使用哈希表可以使应用拥有常数级别的查找和插入操作的符号表。这使得其在很多情况下成为实现简单符号表的最佳选择。

二、哈希函数

如果算法用一个大小为M的数组来储存键值对，那么需要一个能够将任意键转为该数组范围内的索引（0-M-1）的哈希函数。

这个哈希函数应该易于计算并且能够均匀分布所有的键。即对于任意键，0到M-1之间的每个整数都有相等可能性与之对应。

1、正整数

将整数哈希最常用的方法是除留余数法。这个方法选择大小为素数M的数组，对于任意正整数k，计算k除以M的余数。

如果M不是素数的话，将不能有效利用键中所包含的所有信息，导致算法不能均匀地分布所有键。

比如，键值是十进制而M为10k，则哈希函数只能利用最后k位（10001%100=01，只利用了后2位）。

2、浮点数

四舍五入的方法比较容易理解，但有缺陷，因为这种情况高位起的作用更大，地位对哈希的结果没什么影响。

更好的方法是先将浮点数转为为二进制数，再用除留余数法。

3、字符串

用除留余数法也能处理较长的键，如字符串。只是将字符串当做一个大整数。

  1. int hash = 0;
  2. for(int i = 0; i < s.length(); i++)
  3.     hash = (R * hash +　s.charAt(i)) % M;

这种计算把字符串当做一个N位的R进制值，并将其除以M并取余。

这里要注意字符串表示的数字，高位在前，即s.charAt(0)为最高位。

R取值要足够小，使之不造成溢出，这里选31。

Java的String默认实现采用了类似的方法：

  1. public int hashCode() {
  2.         int h = hash;
  3.         if (h == 0 && value.length > 0) {
  4.             char val[] = value;
  6.             for (int i = 0; i < value.length; i++) {
  7.                 h = 31 * h + val[i];
  8.             }
  9.             hash = h;
  10.         }
  11.         return h;
  12.     }

只是这里的M值默认为int的最大值加1。

4、组合键

如果键的类型含有多个整型变量，算法可以向String一样，将其混合起来。

5、Java的约定

每种数据类型都需要相应的哈希函数，Java中每个数据类型都继承了hashCode方法。

每个数据类型的hashCode方法都必须和equas方法一致。

也就是说，如果a.equals(b)方法返回true，那么a.hashCode和b.hashCode的返回值相同。

相反两个对象的哈希值不一样，那这两个对象是不同的。如果两个对象的哈希值一样，那这两个对象不一定是相同的。

总：hashCode是equals的必要不充分条件。

6、将hashCode的返回值转换为数组索引

因为实际应用需要的是数组的索引而不是一个32位的整数，所以在实际实现中会将默认的hashCode方法和除留余数法结合起来产生一个0大M-1的整数。

  1. private int hash(Key x) {
  2.     return (x.hashCode() & 0x7fffffff) % M;
  3. }

7、自定义hashCode方法

自定义hashCode方法必须将键平均分布到32位整数中去。

8、缓存

如果哈希值计算很麻烦，那么可以将每个键的哈希值缓存起来（储存到变量hash），第一次调用时计算，之后都是直接返回哈希值。

一个优秀的哈希方法需要满足三个条件：

一致性——等价的键必须产生相等的哈希值

高效性——计算简便

均匀性——均匀地哈希所有键

保证均匀性的最好办法是保证键的每一位都在哈希值的计算中起到了相同的作用。

9、假设

假设：算法使用的哈希函数能够将所有键均匀并独立地分布到0和M-1之间。

这个假设是实际上无法达到的理想模型，但是是算法实现哈希函数的指导思想。

三、基于拉链法的哈希表

1、简介

哈希函数将键转化为数组索引，第二步就是需要进行碰撞处理。

一种最直接的方法是将大小为M的数组的每个元素指向一条链表，链表的每个节点都储存了哈希值为该位置数组下标的键值对。

这种方法称为拉链法（separate chaining）。因为冲突的元素都放在同一个链表上。

这种方法的思想就是：选择足够大的M使得链表都尽可能短以保证高效查找。

查找顺序：先根据哈希值找到相应的链表，然后遍历链表查找相应的键。

2、实现

这里可以用两种方式实现，第一种是用原始的链表数据类型，第二种是用之前已经实现了的SequentialSearchST。

算法使用了M条链表来保存N个键，所以链表的平均长度是N/M。

官方实现：

  1. public class SeparateChainingHashST<Key, Value> {
  2.     private static final int INIT_CAPACITY = 4;
  4.     private int n;                                // number of key-value pairs
  5.     private int m;                                // hash table size
  6.     private SequentialSearchST<Key, Value>[] st;  // array of linked-list symbol tables
  9.     /**
  10.      * Initializes an empty symbol table.
  11.      */
  12.     public SeparateChainingHashST() {
  13.         this(INIT_CAPACITY);
  14.     } 
  16.     /**
  17.      * Initializes an empty symbol table with {
  18.      @code m} chains.
  19.      * @param m the initial number of chains
  20.      */
  21.     public SeparateChainingHashST(int m) {
  22.         this.m = m;
  23.         st = (SequentialSearchST<Key, Value>[]) new SequentialSearchST[m];
  24.         for (int i = 0; i < m; i++)
  25.             st[i] = new SequentialSearchST<Key, Value>();
  26.     } 
  28.     // resize the hash table to have the given number of chains,
  29.     // rehashing all of the keys
  30.     private void resize(int chains) {
  31.         SeparateChainingHashST<Key, Value> temp = new SeparateChainingHashST<Key, Value>(chains);
  32.         for (int i = 0; i < m; i++) {
  33.             for (Key key : st[i].keys()) {
  34.                 temp.put(key, st[i].get(key));
  35.             }
  36.         }
  37.         this.m  = temp.m;
  38.         this.n  = temp.n;
  39.         this.st = temp.st;
  40.     }
  42.     // hash value between 0 and m-1
  43.     private int hash(Key key) {
  44.         return (key.hashCode() & 0x7fffffff) % m;
  45.     } 
  47.     /**
  48.      * Returns the number of key-value pairs in this symbol table.
  49.      *
  50.      * @return the number of key-value pairs in this symbol table
  51.      */
  52.     public int size() {
  53.         return n;
  54.     } 
  56.     /**
  57.      * Returns true if this symbol table is empty.
  58.      *
  59.      * @return {
  60.      @code true} if this symbol table is empty;
  61.      *         {
  62.      @code false} otherwise
  63.      */
  64.     public boolean isEmpty() {
  65.         return size() == 0;
  66.     }
  68.     /**
  69.      * Returns true if this symbol table contains the specified key.
  70.      *
  71.      * @param  key the key
  72.      * @return {
  73.      @code true} if this symbol table contains {
  74.      @code key};
  75.      *         {
  76.      @code false} otherwise
  77.      * @throws IllegalArgumentException if {
  78.      @code key} is {
  79.      @code null}
  80.      */
  81.     public boolean contains(Key key) {
  82.         if (key == null) throw new IllegalArgumentException("argument to contains() is null");
  83.         return get(key) != null;
  84.     } 
  86.     /**
  87.      * Returns the value associated with the specified key in this symbol table.
  88.      *
  89.      * @param  key the key
  90.      * @return the value associated with {
  91.      @code key} in the symbol table;
  92.      *         {
  93.      @code null} if no such value
  94.      * @throws IllegalArgumentException if {
  95.      @code key} is {
  96.      @code null}
  97.      */
  98.     public Value get(Key key) {
  99.         if (key == null) throw new IllegalArgumentException("argument to get() is null");
  100.         int i = hash(key);
  101.         return st[i].get(key);
  102.     } 
  104.     /**
  105.      * Inserts the specified key-value pair into the symbol table, overwriting the old 
  106.      * value with the new value if the symbol table already contains the specified key.
  107.      * Deletes the specified key (and its associated value) from this symbol table
  108.      * if the specified value is {
  109.      @code null}.
  110.      *
  111.      * @param  key the key
  112.      * @param  val the value
  113.      * @throws IllegalArgumentException if {
  114.      @code key} is {
  115.      @code null}
  116.      */
  117.     public void put(Key key, Value val) {
  118.         if (key == null) throw new IllegalArgumentException("first argument to put() is null");
  119.         if (val == null) {
  120.             delete(key);
  121.             return;
  122.         }
  124.         // double table size if average length of list >= 10
  125.         if (n >= 10*m) resize(2*m);
  127.         int i = hash(key);
  128.         if (!st[i].contains(key)) n++;
  129.         st[i].put(key, val);
  130.     } 
  132.     /**
  133.      * Removes the specified key and its associated value from this symbol table     
  134.      * (if the key is in this symbol table).    
  135.      *
  136.      * @param  key the key
  137.      * @throws IllegalArgumentException if {
  138.      @code key} is {
  139.      @code null}
  140.      */
  141.     public void delete(Key key) {
  142.         if (key == null) throw new IllegalArgumentException("argument to delete() is null");
  144.         int i = hash(key);
  145.         if (st[i].contains(key)) n--;
  146.         st[i].delete(key);
  148.         // halve table size if average length of list <= 2
  149.         if (m > INIT_CAPACITY && n <= 2*m) resize(m/2);
  150.     } 
  152.     // return keys in symbol table as an Iterable
  153.     public Iterable<Key> keys() {
  154.         Queue<Key> queue = new Queue<Key>();
  155.         for (int i = 0; i < m; i++) {
  156.             for (Key key : st[i].keys())
  157.                 queue.enqueue(key);
  158.         }
  159.         return queue;
  160.     } 
  163.     /**
  164.      * Unit tests the {
  165.      @code SeparateChainingHashST} data type.
  166.      *
  167.      * @param args the command-line arguments
  168.      */
  169.     public static void main(String[] args) { 
  170.         SeparateChainingHashST<String, Integer> st = new SeparateChainingHashST<String, Integer>();
  171.         for (int i = 0; !StdIn.isEmpty(); i++) {
  172.             String key = StdIn.readString();
  173.             st.put(key, i);
  174.         }
  176.         // print keys
  177.         for (String s : st.keys()) 
  178.             StdOut.println(s + " " + st.get(s)); 
  180.     }
  182. }

注：这个实现动态调整了链表数组的大小，而且动态调整链表数组大小需要重新哈希所有键，因为M的大小发生了变化。

3、性能分析

结论1：在一张含有M条链表和N个键的哈希表中，任意一条链表的长度均在N/M的常数因子范围内的概率无限趋向于1。

这个结论完全依赖于这个假设：算法使用的哈希函数能够将所有键均匀并独立地分布到0和M-1之间。

结论2：在一张含有M条链表和N个键的哈希表中，未命中查找和插入操作所需的比较次数为~N/M。

4、有序性相关操作

哈希表不是合适的选择，这回导致线性级别的运行时间。

四、基于线性探测法的哈希表

1、简介

实现哈希表的另一种方法是用大小为M的数组保存N个键值对，其中M>N。这种方法依靠数组中的空位解决碰撞冲突。

当发生碰撞时，算法检查下一个位置（将索引加1）。

这样线性探测可能会产生三种结果：

命中，该位置的键和要查找的键相同。

未命中，该键为空。

继续查找，该位置的键和要查找的键不相同。

查找的思路：先用哈希函数找到键在数组中的索引，检查其中的键和被查找的键是否相同，如果不同则继续查找，直到找到该键或者遇到一个空元素。

2、实现

官方实现：

使用了两个数组，一个用于保存键，一个用于保存值。

  1. public class LinearProbingHashST<Key, Value> {
  2.     private static final int INIT_CAPACITY = 4;
  4.     private int n;           // number of key-value pairs in the symbol table
  5.     private int m;           // size of linear probing table
  6.     private Key[] keys;      // the keys
  7.     private Value[] vals;    // the values
  10.     /**
  11.      * Initializes an empty symbol table.
  12.      */
  13.     public LinearProbingHashST() {
  14.         this(INIT_CAPACITY);
  15.     }
  17.     /**
  18.      * Initializes an empty symbol table with the specified initial capacity.
  19.      *
  20.      * @param capacity the initial capacity
  21.      */
  22.     public LinearProbingHashST(int capacity) {
  23.         m = capacity;
  24.         n = 0;
  25.         keys = (Key[])   new Object[m];
  26.         vals = (Value[]) new Object[m];
  27.     }
  29.     /**
  30.      * Returns the number of key-value pairs in this symbol table.
  31.      *
  32.      * @return the number of key-value pairs in this symbol table
  33.      */
  34.     public int size() {
  35.         return n;
  36.     }
  38.     /**
  39.      * Returns true if this symbol table is empty.
  40.      *
  41.      * @return {
  42.      @code true} if this symbol table is empty;
  43.      *         {
  44.      @code false} otherwise
  45.      */
  46.     public boolean isEmpty() {
  47.         return size() == 0;
  48.     }
  50.     /**
  51.      * Returns true if this symbol table contains the specified key.
  52.      *
  53.      * @param  key the key
  54.      * @return {
  55.      @code true} if this symbol table contains {
  56.      @code key};
  57.      *         {
  58.      @code false} otherwise
  59.      * @throws IllegalArgumentException if {
  60.      @code key} is {
  61.      @code null}
  62.      */
  63.     public boolean contains(Key key) {
  64.         if (key == null) throw new IllegalArgumentException("argument to contains() is null");
  65.         return get(key) != null;
  66.     }
  68.     // hash function for keys - returns value between 0 and M-1
  69.     private int hash(Key key) {
  70.         return (key.hashCode() & 0x7fffffff) % m;
  71.     }
  73.     // resizes the hash table to the given capacity by re-hashing all of the keys
  74.     private void resize(int capacity) {
  75.         LinearProbingHashST<Key, Value> temp = new LinearProbingHashST<Key, Value>(capacity);
  76.         for (int i = 0; i < m; i++) {
  77.             if (keys[i] != null) {
  78.                 temp.put(keys[i], vals[i]);
  79.             }
  80.         }
  81.         keys = temp.keys;
  82.         vals = temp.vals;
  83.         m    = temp.m;
  84.     }
  86.     /**
  87.      * Inserts the specified key-value pair into the symbol table, overwriting the old 
  88.      * value with the new value if the symbol table already contains the specified key.
  89.      * Deletes the specified key (and its associated value) from this symbol table
  90.      * if the specified value is {
  91.      @code null}.
  92.      *
  93.      * @param  key the key
  94.      * @param  val the value
  95.      * @throws IllegalArgumentException if {
  96.      @code key} is {
  97.      @code null}
  98.      */
  99.     public void put(Key key, Value val) {
  100.         if (key == null) throw new IllegalArgumentException("first argument to put() is null");
  102.         if (val == null) {
  103.             delete(key);
  104.             return;
  105.         }
  107.         // double table size if 50% full
  108.         if (n >= m/2) resize(2*m);
  110.         int i;
  111.         for (i = hash(key); keys[i] != null; i = (i + 1) % m) {
  112.             if (keys[i].equals(key)) {
  113.                 vals[i] = val;
  114.                 return;
  115.             }
  116.         }
  117.         keys[i] = key;
  118.         vals[i] = val;
  119.         n++;
  120.     }
  122.     /**
  123.      * Returns the value associated with the specified key.
  124.      * @param key the key
  125.      * @return the value associated with {
  126.      @code key};
  127.      *         {
  128.      @code null} if no such value
  129.      * @throws IllegalArgumentException if {
  130.      @code key} is {
  131.      @code null}
  132.      */
  133.     public Value get(Key key) {
  134.         if (key == null) throw new IllegalArgumentException("argument to get() is null");
  135.         for (int i = hash(key); keys[i] != null; i = (i + 1) % m)
  136.             if (keys[i].equals(key))
  137.                 return vals[i];
  138.         return null;
  139.     }
  141.     /**
  142.      * Removes the specified key and its associated value from this symbol table     
  143.      * (if the key is in this symbol table).    
  144.      *
  145.      * @param  key the key
  146.      * @throws IllegalArgumentException if {
  147.      @code key} is {
  148.      @code null}
  149.      */
  150.     public void delete(Key key) {
  151.         if (key == null) throw new IllegalArgumentException("argument to delete() is null");
  152.         if (!contains(key)) return;
  154.         // find position i of key
  155.         int i = hash(key);
  156.         while (!key.equals(keys[i])) {
  157.             i = (i + 1) % m;
  158.         }
  160.         // delete key and associated value
  161.         keys[i] = null;
  162.         vals[i] = null;
  164.         // rehash all keys in same cluster
  165.         i = (i + 1) % m;
  166.         while (keys[i] != null) {
  167.             // delete keys[i] an vals[i] and reinsert
  168.             Key   keyToRehash = keys[i];
  169.             Value valToRehash = vals[i];
  170.             keys[i] = null;
  171.             vals[i] = null;
  172.             n--;
  173.             put(keyToRehash, valToRehash);
  174.             i = (i + 1) % m;
  175.         }
  177.         n--;
  179.         // halves size of array if it's 12.5% full or less
  180.         if (n > 0 && n <= m/8) resize(m/2);
  182.         assert check();
  183.     }
  185.     /**
  186.      * Returns all keys in this symbol table as an {
  187.      @code Iterable}.
  188.      * To iterate over all of the keys in the symbol table named {
  189.      @code st},
  190.      * use the foreach notation: {
  191.      @code for (Key key : st.keys())}.
  192.      *
  193.      * @return all keys in this symbol table
  194.      */
  195.     public Iterable<Key> keys() {
  196.         Queue<Key> queue = new Queue<Key>();
  197.         for (int i = 0; i < m; i++)
  198.             if (keys[i] != null) queue.enqueue(keys[i]);
  199.         return queue;
  200.     }
  202.     // integrity check - don't check after each put() because
  203.     // integrity not maintained during a delete()
  204.     private boolean check() {
  206.         // check that hash table is at most 50% full
  207.         if (m < 2*n) {
  208.             System.err.println("Hash table size m = " + m + "; array size n = " + n);
  209.             return false;
  210.         }
  212.         // check that each key in table can be found by get()
  213.         for (int i = 0; i < m; i++) {
  214.             if (keys[i] == null) continue;
  215.             else if (get(keys[i]) != vals[i]) {
  216.                 System.err.println("get[" + keys[i] + "] = " + get(keys[i]) + "; vals[i] = " + vals[i]);
  217.                 return false;
  218.             }
  219.         }
  220.         return true;
  221.     }
  224.     /**
  225.      * Unit tests the {
  226.      @code LinearProbingHashST} data type.
  227.      *
  228.      * @param args the command-line arguments
  229.      */
  230.     public static void main(String[] args) { 
  231.         LinearProbingHashST<String, Integer> st = new LinearProbingHashST<String, Integer>();
  232.         for (int i = 0; !StdIn.isEmpty(); i++) {
  233.             String key = StdIn.readString();
  234.             st.put(key, i);
  235.         }
  237.         // print keys
  238.         for (String s : st.keys()) 
  239.             StdOut.println(s + " " + st.get(s)); 
  240.     }
  241. }

注：NULL表示一簇键的结束。

delete方法比较复杂，需要在下图的哈希表中删除C，直接在该键所在的位置设为null是不行的。这样会导致其后边的S和H无法被找到，所以需要将S和H重新插入，即要删除的键同个簇中右侧的键。

833392-20170609222117075-1569715054.png

和拉链法一样，线性探测法哈希表的性能也依赖于N/M的比值。

只不过意义不一样，这里是N/M是哈希表中被占用的空间比例，算法使用动态调整数组大小方法来保证使用率在1/8到1/2之间。

和拉链法一样，动态调整数组大小需要重新哈希所有键。

3、数学分析

线性探测的性能取决于元素在插入数组后聚集成的一组连续的条目，也叫键簇。

键簇短小才能保证高的效率。随着插入的键越来越多，这个要求越来越难满足，较长的键簇会越来越多。

结论：在一张大小为M，且含有N=αM个键的基于线性探测哈希表中，基于假设（算法使用的哈希函数能够将所有键均匀并独立地分布到0和M-1之间），命中和未命中查找查找所需的探测次数为分别为：

833392-20170609224300872-2090655944.png

特别当α=1/2时，这两个值分别为3/2,、5/2。单α趋于1时，这些估计值精确度会下降。

不过我们不用担心这个情况，算法会保证α小于1/2。

当使用率小于1/2时，探测的预计次数在1.5和2.5之间。

在put函数和delete函数，可以看到有相应的动态调整数组大小的语句。保证α小于1/2，并大于某个值。

转载于:https://www.cnblogs.com/songdechiu/p/6954038.html

发表评论

表情：
评论列表 （有 0 条评论，565人围观）

还没有评论，来说两句吧...

相关阅读

    相关 哈希表

    什么是哈希表    哈希表（Hash table，也叫散列表），是根据关键码值(Key value)而直接进行访问的[数据结构][Link 1]。也就是说，它通过把关键码

    悠悠悠悠/ 0 赞/ 364 阅读

    相关 哈希表

    散列表（Hash table，也叫哈希表），是根据关键码值(Key value)而直接进行访问的数据结构。也就是说，它通过把关键码值映射到表中一个位置来访问记录，以加快查找的速

    系统管理员系统管理员/ 0 赞/ 410 阅读

    相关 哈希表

    我们知道，通过对数组进行直接寻址（Direct Addressing），可以在 O(1) 时间内访问数组中的任意元素。所以，如果存储空间允许，可以提供一个数组，为每个可能的关键

    快来打我*快来打我*/ 0 赞/ 545 阅读

    相关 哈希表

    哈希表是种数据结构，它可以提供快速的插入操作和查找操作。第一次接触哈希表时，它的优点多得让人难以置信。不论哈希表中有多少数据，插入和删除（有时包括侧除）只需要接近常量的时间即0

    今天药忘吃喽~今天药忘吃喽~/ 0 赞/ 553 阅读

    相关 哈希表

    一、简介 如果所有的键都是小整数，那么我们可以用一个数组来实现无序的符号表，将键作为数组的索引i而数组中i（键）处储存的就是对应的值。 这样就可以快速地访问任意键的值，

    旧城等待，旧城等待，/ 0 赞/ 566 阅读

    相关 哈希表

    【一】哈希表 > 他通过把关键码值映射到表中的一个位置来访问记录，以加快查找的速度。这个映射函数就是散列函数。 ![watermark_type_ZmFuZ3poZW5na

    傷城~傷城~/ 0 赞/ 734 阅读