969      阿裏雲  技術社區[雲棲]

為什麼ConcurrentHashMap是弱一致的

本文將用到Java內存模型的happens-before偏序關係（下文將簡稱為hb）以及ConcurrentHashMap的底層模型相關的知識。happens-before相關內容參見：JLS §17.4.5. Happens-before Order、深入理解Java內存模型以及Happens before；ConcurrentHashMap的詳細介紹以及底層原理見深入分析ConcurrentHashMap。本文將從ConcurrentHashMap的get，clear，iterator（entrySet、keySet、values方法）三個方法來分析它們的弱一致問題。

ConcurrentHashMap#get

get方法是弱一致的，是什麼含義？可能你期望往ConcurrentHashMap底層數據結構中加入一個元素後，立馬能對get可見，但 ConcurrentHashMap並不能如你所願。換句話說，put操作將一個元素加入到底層數據結構後，get可能在某段時間內還看不到這個元素，若 不考慮內存模型，單從代碼邏輯上來看，卻是應該可以看得到的。

下麵將結合代碼和java內存模型相關內容來分析下put/get方法（本文中所有ConcurrentHashMap相關的代碼均來自hotspot1.6.0_18）。put方法我們隻需關注Segment#put，get方法隻需關注Segment#get，在繼續之前，先要說明一下Segment裏有兩個volatile變量：count和table；HashEntry裏有一個volatile變量：value。

Segment#put

V put(K key, int hash, V value, boolean onlyIfAbsent) {
	lock();
	try {
		int c = count;
		if (c++ > threshold) // ensure capacity
			rehash();
		HashEntry<K,V>[] tab = table;
		int index = hash & (tab.length - 1);
		HashEntry<K,V> first = tab[index];
		HashEntry<K,V> e = first;
		while (e != null && (e.hash != hash || !key.equals(e.key)))
			e = e.next;

		V oldValue;
		if (e != null) {
			oldValue = e.value;
			if (!onlyIfAbsent)
				e.value = value;
		}
		else {
			oldValue = null;
			++modCount;
			tab[index] = new HashEntry<K,V>(key, hash, first, value);
			count = c; // write-volatile
		}
		return oldValue;
	} finally {
		unlock();
	}
}

Segment#get

V get(Object key, int hash) {
	if (count != 0) { // read-volatile
		HashEntry<K,V> e = getFirst(hash);
		while (e != null) {
			if (e.hash == hash && key.equals(e.key)) {
				V v = e.value;
				if (v != null)
					return v;
				return readValueUnderLock(e); // recheck
			}
			e = e.next;
		}
	}
	return null;
}

我們如何確定線程1放入某個變量的值是否對線程2可見？文章開頭提到的JLS鏈接中有說到，當a hb c時，a對c可見，那麼我們接下來我們隻要尋找put和get之間所有可能的執行軌跡上的hb關係。要找出hb關係，我們需要先找出與hb相關的 Action。為方便，這裏將兩段代碼放到了一張圖片上。

可以注意到，同一個Segment實例中的put操作是加了鎖的，而對應的get卻沒有。根據hb關係中的線程間Action類別，可以從上圖中找出這些Action，主要是volatile讀寫和加解鎖，也就是圖中畫了橫線的那些。

put操作可以分為兩種情況，一是key已經存在，修改對應的value；二是key不存在，將一個新的Entry加入底層數據結構。

key已經存在的情況比較簡單，即if (e != null)部分，前麵已經說過HashEntry的value是個volatile變量，當線程1給value賦值後，會立馬對執行get的線程2可見，而不用等到put方法結束。

key不存在的情況稍微複雜一些，新加一個Entry的邏輯在else中。那麼將new HashEntry賦值給tab[index]是否能立刻對執行get的線程可見呢？我們隻需分析寫tab[index]與讀取tab[index]之間是否有hb關係即可。

假設執行put的線程與執行get的線程的軌跡是這樣的

tab變量是一個普通的變量，雖然給它賦值的是volatile的table。另外，雖然引用類型（數組類型）的變量table是volatile 的，但table中的元素不是volatile的，因此⑧隻是一個普通的寫操作；count變量是volatile的，因此②是一個volatile 寫；③很顯然是一個volatile讀；⑨中getFirst方法中讀取了table，因此包含一個volatile讀。

根據Synchronization Order，對同一個volatile變量，有volatile寫 hb volatile讀。在這個執行軌跡中，時間上②在③之前發生，且②是寫count，③是讀count，都是針對同一個volatile變量count， 因此有② hb ③；又因為⑧和②是同一個線程中的，③和⑨是同一個線程中的，根據Program Order，有⑧ hb ②，③ hb ⑨。目前我們有了三組關係了⑧ hb ②，② hb ③，③ hb ⑨，再根據hb關係是可傳遞的（即若有x hb y且y hb z，可得出x hb z），可以得出⑧ hb ⑨。因此，如果按照上述執行軌跡，⑧中寫入的數組元素對⑨中的讀取操作是可見的。

再考慮這樣一個執行軌跡：

這裏隻是變換了下執行順序。每條語句的volatile讀寫含義同上，但它們之間的hb關係卻改變了。Program Order是我們一直擁有的，即我們有⑧ hb ②，③ hb ⑨。但這次對volatile的count的讀時間上發生在對count的寫之前，我們無法得出② hb ⑨這層關係了。因此，通過count變量，在這個軌跡上是無法得出⑧ hb ⑨的。那麼，存不存在其它可替換關係，讓我們仍能得出⑧ hb ⑨呢？

我們要找的是，在⑧之後有一條語句或指令x，在⑨之前有一條語句或指令y，存在x hb y。這樣我們可以有⑧ hb x，x hb y， y hb ⑨。就讓我們來找一下是否存在這樣的x和y。圖中的⑤、⑥、⑦、①存在volatile讀寫，但是它們在⑧之前，因此對確立⑧ hb ⑨這個關係沒有用處；同理，④在⑨之後，我們要找的是⑨之前的，因此也對這個問題無益。前麵已經分析過了②，③之間沒法確立hb關係。

在⑧之後，我們發現一個unlock操作，如果能在⑨之前找到一個lock操作，那麼我們要找的x就是unlock，要找的y就是lock，因為 Synchronization Order中有unlock hb lock的關係。但是，很不幸運，⑨之前沒有lock操作。因此，對於這樣的軌跡，是沒有⑧ hb ⑨關係的，也就是說，如果某個Segment實例中的put將一個Entry加入到了table中，在未執行count賦值操作之前有另一個線程執行了同 一個Segment實例中的get，來獲取這個剛加入的Entry中的value，那麼是有可能取不到的！

此外，如果getFirst(hash)先執行，tab[index] = new HashEntry<K,V>(key, hash, first, value)後執行，那麼，這個get操作也是看不到put的結果的。

……

正是因為get操作幾乎所有時候都是一個無鎖操作（get中有一個readValueUnderLock調用，不過這句執行到的幾率極小），使得同 一個Segment實例上的put和get可以同時進行，這就是get操作是弱一致的根本原因。Java API中對此有一句簡單的描述:

Retrievals reflect the results of the most recently completed update operations holding upon their onset.

也就是說API上保證get操作一定能看到已完成的put操作。已完成的put操作肯定在get讀取count之前對count做了寫入操作。因此，也就是我們第一個軌跡分析的情況。

ConcurrentHashMap#clear

clear方法很簡單，看下代碼即知。

public void clear() {
	for (int i = 0; i < segments.length; ++i)
		segments[i].clear();
}

因為沒有全局的鎖，在清除完一個segments之後，正在清理下一個segments的時候，已經清理segments可能又被加入了數據，因此clear返回的時候，ConcurrentHashMap中是可能存在數據的。因此，clear方法是弱一致的。

ConcurrentHashMap中的迭代器

ConcurrentHashMap中的迭代器主要包括entrySet、keySet、values方法。它們大同小異，這裏選擇 entrySet解釋。當我們調用entrySet返回值的iterator方法時，返回的是EntryIterator，在EntryIterator 上調用next方法時，最終實際調用到了HashIterator.advance()方法，看下這個方法：

final void advance() {
	if (nextEntry != null && (nextEntry = nextEntry.next) != null)
		return;

	while (nextTableIndex >= 0) {
		if ( (nextEntry = currentTable[nextTableIndex--]) != null)
			return;
	}

	while (nextSegmentIndex >= 0) {
		Segment<K,V> seg = segments[nextSegmentIndex--];
		if (seg.count != 0) {
			currentTable = seg.table;
			for (int j = currentTable.length - 1; j >= 0; --j) {
				if ( (nextEntry = currentTable[j]) != null) {
					nextTableIndex = j - 1;
					return;
				}
			}
		}
	}
}

這個方法在遍曆底層數組。在遍曆過程中，如果已經遍曆的數組上的內容變化了，迭代器不會拋出 ConcurrentModificationException異常。如果未遍曆的數組上的內容發生了變化，則有可能反映到迭代過程中。這就是 ConcurrentHashMap迭代器弱一致的表現。

總結

ConcurrentHashMap的弱一致性主要是為了提升效率，是一致性與效率之間的一種權衡。要成為強一致性，就得到處使用鎖，甚至是全局鎖，這就與Hashtable和同步的HashMap一樣了。

文章轉自 並發編程網-ifeve.com

最後更新：2017-05-22 18:01:53

  上一篇：  類中字段賦值給局部變量後再使用意義何在？

  下一篇：  顛覆大數據分析之第二章結束語