一致性hash算法 - wtdig/study GitHub Wiki
一致性hash
一致性hash算法提出了在动态变化的Cache环境中,判定哈希算法好坏的四个定义: 1、平衡性(Balance):平衡性是指哈希的结果能够尽可能分布到所有的缓冲中去,这样可以使得所有的缓冲空间都得到利用。很多哈希算法都能够满足这一条件。 2、单调性(Monotonicity):单调性是指如果已经有一些内容通过哈希分派到了相应的缓冲中,又有新的缓冲加入到系统中。哈希的结果应能够保证原有已分配的内容可以被映射到原有的或者新的缓冲中去,而不会被映射到旧的缓冲集合中的其他缓冲区。 3、分散性(Spread):在分布式环境中,终端有可能看不到所有的缓冲,而是只能看到其中的一部分。当终端希望通过哈希过程将内容映射到缓冲上时,由于不同终端所见的缓冲范围有可能不同,从而导致哈希的结果不一致,最终的结果是相同的内容被不同的终端映射到不同的缓冲区中。这种情况显然是应该避免的,因为它导致相同内容被存储到不同缓冲中去,降低了系统存储的效率。分散性的定义就是上述情况发生的严重程度。好的哈希算法应能够尽量避免不一致的情况发生,也就是尽量降低分散性。 4、负载(Load):负载问题实际上是从另一个角度看待分散性问题。既然不同的终端可能将相同的内容映射到不同的缓冲区中,那么对于一个特定的缓冲区而言,也可能被不同的用户映射为不同 的内容。与分散性一样,这种情况也是应当避免的,因此好的哈希算法应能够尽量降低缓冲的负荷。
备注:一致性hash算法:有10个数据分配到3台机器上;首先算出10个数据的hash值和3台机器的hash值,将3台机器的hash值按照从小到大的顺序分布到一个封闭的圆中,然后将10个数据的hash值,按照从小到大的顺序放到这个圆上,比节点hash值小的归属到上一个节点上,这样10个数据就分配到3个节点上了。这样做,满足了单调性和分散性,但是平衡性没有满足,于是一个节点可以对应多个虚拟节点,将虚假节点的hash值均匀的分散到整个圆上,这样真实节点对应的虚拟节点就可以分散到整个圆上,以满足平衡性的要求。