JAVA lock 原理讲解
Lock完全用Java寫成,在java這個層面是無關(guān)JVM實(shí)現(xiàn)的。
在java.util.concurrent.locks包中有很多Lock的實(shí)現(xiàn)類,常用的有ReentrantLock、ReadWriteLock(實(shí)現(xiàn)類ReentrantReadWriteLock),其實(shí)現(xiàn)都依賴java.util.concurrent.AbstractQueuedSynchronizer類,實(shí)現(xiàn)思路都大同小異,因此我們以ReentrantLock作為講解切入點(diǎn)。
ReentrantLock的調(diào)用過程
經(jīng)過觀察ReentrantLock把所有Lock接口的操作都委派到一個Sync類上,該類繼承了AbstractQueuedSynchronizer:
static abstract class Sync extends AbstractQueuedSynchronizerSync又有兩個子類:
final static class NonfairSync extends Sync final static class FairSync extends Sync顯然是為了支持公平鎖和非公平鎖而定義,默認(rèn)情況下為非公平鎖。?
先理一下Reentrant.lock()方法的調(diào)用過程(默認(rèn)非公平鎖):?
這些討厭的Template模式導(dǎo)致很難直觀的看到整個調(diào)用過程,其實(shí)通過上面調(diào)用過程及AbstractQueuedSynchronizer的注釋可以發(fā)現(xiàn),AbstractQueuedSynchronizer中抽象了絕大多數(shù)Lock的功能,而只把tryAcquire方法延遲到子類中實(shí)現(xiàn)。tryAcquire方法的語義在于用具體子類判斷請求線程是否可以獲得鎖,無論成功與否AbstractQueuedSynchronizer都將處理后面的流程。
鎖實(shí)現(xiàn)(加鎖)
簡單說來,AbstractQueuedSynchronizer會把所有的請求線程構(gòu)成一個CLH隊(duì)列,當(dāng)一個線程執(zhí)行完畢(lock.unlock())時會激活自己的后繼節(jié)點(diǎn),但正在執(zhí)行的線程并不在隊(duì)列中,而那些等待執(zhí)行的線程全部處于阻塞狀態(tài),經(jīng)過調(diào)查線程的顯式阻塞是通過調(diào)用LockSupport.park()完成,而LockSupport.park()則調(diào)用sun.misc.Unsafe.park()本地方法,再進(jìn)一步,HotSpot在Linux中中通過調(diào)用pthread_mutex_lock函數(shù)把線程交給系統(tǒng)內(nèi)核進(jìn)行阻塞。?
該隊(duì)列如圖:
與synchronized相同的是,這也是一個虛擬隊(duì)列,不存在隊(duì)列實(shí)例,僅存在節(jié)點(diǎn)之間的前后關(guān)系。令人疑惑的是為什么采用CLH隊(duì)列呢?原生的CLH隊(duì)列是用于自旋鎖,但Doug Lea把其改造為阻塞鎖。?
當(dāng)有線程競爭鎖時,該線程會首先嘗試獲得鎖,這對于那些已經(jīng)在隊(duì)列中排隊(duì)的線程來說顯得不公平,這也是非公平鎖的由來,與synchronized實(shí)現(xiàn)類似,這樣會極大提高吞吐量。?
如果已經(jīng)存在Running線程,則新的競爭線程會被追加到隊(duì)尾,具體是采用基于CAS的Lock-Free算法,因?yàn)榫€程并發(fā)對Tail調(diào)用CAS可能會導(dǎo)致其他線程CAS失敗,解決辦法是循環(huán)CAS直至成功。AbstractQueuedSynchronizer的實(shí)現(xiàn)非常精巧,令人嘆為觀止,不入細(xì)節(jié)難以完全領(lǐng)會其精髓,下面詳細(xì)說明實(shí)現(xiàn)過程:
2.1 Sync.nonfairTryAcquire
nonfairTryAcquire方法將是lock方法間接調(diào)用的第一個方法,每次請求鎖時都會首先調(diào)用該方法。
final boolean nonfairTryAcquire(int acquires) { final Thread current = Thread.currentThread(); int c = getState(); if (c == 0) { if (compareAndSetState(0, acquires)) { setExclusiveOwnerThread(current); return true; } } else if (current == getExclusiveOwnerThread()) { int nextc = c + acquires; if (nextc < 0) // overflow throw new Error("Maximum lock count exceeded"); setState(nextc); return true; } return false; }該方法會首先判斷當(dāng)前狀態(tài),如果c==0說明沒有線程正在競爭該鎖,如果不c !=0 說明有線程正擁有了該鎖。?
如果發(fā)現(xiàn)c==0,則通過CAS設(shè)置該狀態(tài)值為acquires,acquires的初始調(diào)用值為1,每次線程重入該鎖都會+1,每次unlock都會-1,但為0時釋放鎖。如果CAS設(shè)置成功,則可以預(yù)計其他任何線程調(diào)用CAS都不會再成功,也就認(rèn)為當(dāng)前線程得到了該鎖,也作為Running線程,很顯然這個Running線程并未進(jìn)入等待隊(duì)列。?
如果c !=0 但發(fā)現(xiàn)自己已經(jīng)擁有鎖,只是簡單地++acquires,并修改status值,但因?yàn)闆]有競爭,所以通過setStatus修改,而非CAS,也就是說這段代碼實(shí)現(xiàn)了偏向鎖的功能,并且實(shí)現(xiàn)的非常漂亮。
2.2 AbstractQueuedSynchronizer.addWaiter
addWaiter方法負(fù)責(zé)把當(dāng)前無法獲得鎖的線程包裝為一個Node添加到隊(duì)尾:
private Node addWaiter(Node mode) { Node node = new Node(Thread.currentThread(), mode); // Try the fast path of enq; backup to full enq on failure Node pred = tail; if (pred != null) { node.prev = pred; if (compareAndSetTail(pred, node)) { pred.next = node; return node; } } enq(node); return node; }其中參數(shù)mode是獨(dú)占鎖還是共享鎖,默認(rèn)為null,獨(dú)占鎖。追加到隊(duì)尾的動作分兩步:?
如果當(dāng)前隊(duì)尾已經(jīng)存在(tail!=null),則使用CAS把當(dāng)前線程更新為Tail?
如果當(dāng)前Tail為null或則線程調(diào)用CAS設(shè)置隊(duì)尾失敗,則通過enq方法繼續(xù)設(shè)置Tail?
下面是enq方法:
該方法就是循環(huán)調(diào)用CAS,即使有高并發(fā)的場景,無限循環(huán)將會最終成功把當(dāng)前線程追加到隊(duì)尾(或設(shè)置隊(duì)頭)。總而言之,addWaiter的目的就是通過CAS把當(dāng)前線程追加到隊(duì)尾,并返回包裝后的Node實(shí)例。
把線程要包裝為Node對象的主要原因,除了用Node構(gòu)造供虛擬隊(duì)列外,還用Node包裝了各種線程狀態(tài),這些狀態(tài)被精心設(shè)計為一些數(shù)字值:
- SIGNAL(-1) :線程的后繼線程正/已被阻塞,當(dāng)該線程release或cancel時要重新這個后繼線程(unpark)
- CANCELLED(1):因?yàn)槌瑫r或中斷,該線程已經(jīng)被取消
- CONDITION(-2):表明該線程被處于條件隊(duì)列,就是因?yàn)檎{(diào)用了Condition.await而被阻塞
- PROPAGATE(-3):傳播共享鎖
- 0:0代表無狀態(tài)
2.3 AbstractQueuedSynchronizer.acquireQueued
acquireQueued的主要作用是把已經(jīng)追加到隊(duì)列的線程節(jié)點(diǎn)(addWaiter方法返回值)進(jìn)行阻塞,但阻塞前又通過tryAccquire重試是否能獲得鎖,如果重試成功能則無需阻塞,直接返回
final boolean acquireQueued(final Node node, int arg) { try { boolean interrupted = false; for (;;) { final Node p = node.predecessor(); if (p == head && tryAcquire(arg)) { setHead(node); p.next = null; // help GC return interrupted; } if (shouldParkAfterFailedAcquire(p, node) && parkAndCheckInterrupt()) interrupted = true; } } catch (RuntimeException ex) { cancelAcquire(node); throw ex; } }仔細(xì)看看這個方法是個無限循環(huán),感覺如果p == head && tryAcquire(arg)條件不滿足循環(huán)將永遠(yuǎn)無法結(jié)束,當(dāng)然不會出現(xiàn)死循環(huán),奧秘在于第12行的parkAndCheckInterrupt會把當(dāng)前線程掛起,從而阻塞住線程的調(diào)用棧。
private final boolean parkAndCheckInterrupt() { LockSupport.park(this); return Thread.interrupted(); }如前面所述,LockSupport.park最終把線程交給系統(tǒng)(Linux)內(nèi)核進(jìn)行阻塞。當(dāng)然也不是馬上把請求不到鎖的線程進(jìn)行阻塞,還要檢查該線程的狀態(tài),比如如果該線程處于Cancel狀態(tài)則沒有必要,具體的檢查在shouldParkAfterFailedAcquire中:
private static boolean shouldParkAfterFailedAcquire(Node pred, Node node) { int ws = pred.waitStatus; if (ws == Node.SIGNAL) /* * This node has already set status asking a release * to signal it, so it can safely park */ return true; if (ws > 0) { /* * Predecessor was cancelled. Skip over predecessors and * indicate retry. */ do { node.prev = pred = pred.prev; } while (pred.waitStatus > 0); pred.next = node; } else { /* * waitStatus must be 0 or PROPAGATE. Indicate that we * need a signal, but don't park yet. Caller will need to * retry to make sure it cannot acquire before parking. */ compareAndSetWaitStatus(pred, ws, Node.SIGNAL); } return false; }檢查原則在于:
-
規(guī)則1:如果前繼的節(jié)點(diǎn)狀態(tài)為SIGNAL,表明當(dāng)前節(jié)點(diǎn)需要unpark,則返回成功,此時acquireQueued方法的第12行(parkAndCheckInterrupt)將導(dǎo)致線程阻塞
-
規(guī)則2:如果前繼節(jié)點(diǎn)狀態(tài)為CANCELLED(ws>0),說明前置節(jié)點(diǎn)已經(jīng)被放棄,則回溯到一個非取消的前繼節(jié)點(diǎn),返回false,acquireQueued方法的無限循環(huán)將遞歸調(diào)用該方法,直至規(guī)則1返回true,導(dǎo)致線程阻塞
-
規(guī)則3:如果前繼節(jié)點(diǎn)狀態(tài)為非SIGNAL、非CANCELLED,則設(shè)置前繼的狀態(tài)為SIGNAL,返回false后進(jìn)入acquireQueued的無限循環(huán),與規(guī)則2同
總體看來,shouldParkAfterFailedAcquire就是靠前繼節(jié)點(diǎn)判斷當(dāng)前線程是否應(yīng)該被阻塞,如果前繼節(jié)點(diǎn)處于CANCELLED狀態(tài),則順便刪除這些節(jié)點(diǎn)重新構(gòu)造隊(duì)列。?
至此,鎖住線程的邏輯已經(jīng)完成,下面討論解鎖的過程。
綜上,lock的實(shí)現(xiàn)其一是cas操作,其二是在Linux下是通過pthread_mutex_unlock完成。pthread_mutex_lock用戶給mutex加鎖,pthread_mutex_unlock用于給mutex解鎖。synchronize 是由monitorenter監(jiān)視器進(jìn)行mutex lock的lock()和unluck(),所以系統(tǒng)層面上兩者都是基于系統(tǒng)內(nèi)核的鎖。說到這里不得不講下內(nèi)核線程(輕量級進(jìn)程)和jvm中線程對應(yīng)關(guān)系(從這里可以預(yù)見是一一對應(yīng))
Linux從內(nèi)核2.6開始使用NPTL (Native POSIX Thread Library)支持,但這時線程本質(zhì)上還輕量級進(jìn)程。?
Java里的線程是由JVM來管理的,它如何對應(yīng)到操作系統(tǒng)的線程是由JVM的實(shí)現(xiàn)來確定的。Linux 2.6上的HotSpot使用了NPTL機(jī)制,JVM線程跟內(nèi)核輕量級進(jìn)程有一一對應(yīng)的關(guān)系。線程的調(diào)度完全交給了操作系統(tǒng)內(nèi)核,當(dāng)然jvm還保留一些策略足以影響到其內(nèi)部的線程調(diào)度,舉個例子,在linux下,只要一個Thread.run就會調(diào)用一個fork產(chǎn)生一個線程。
Java線程在Windows及Linux平臺上的實(shí)現(xiàn)方式,現(xiàn)在看來,是內(nèi)核線程的實(shí)現(xiàn)方式。這種方式實(shí)現(xiàn)的線程,是直接由操作系統(tǒng)內(nèi)核支持的——由內(nèi)核完成線程切換,內(nèi)核通過操縱調(diào)度器(Thread Scheduler)實(shí)現(xiàn)線程調(diào)度,并將線程任務(wù)反映到各個處理器上。內(nèi)核線程是內(nèi)核的一個分身。程序一般不直接使用該內(nèi)核線程,而是使用其高級接口,即輕量級進(jìn)程(LWP),也即線程。這看起來可能很拗口。看圖:
(說明:KLT即內(nèi)核線程Kernel Thread,是“內(nèi)核分身”。每一個KLT對應(yīng)到進(jìn)程P中的某一個輕量級進(jìn)程LWP(也即線程),期間要經(jīng)過用戶態(tài)、內(nèi)核態(tài)的切換,并在Thread Scheduler 下反應(yīng)到處理器CPU上)
這種線程實(shí)現(xiàn)的方式也有它的缺陷:在程序面上使用內(nèi)核線程,必然在操作系統(tǒng)上多次來回切換用戶態(tài)及內(nèi)核態(tài);另外,因?yàn)槭且粚σ坏木€程模型,LWP的支持?jǐn)?shù)是有限的。
對于一個大型程序,我們可以開辟的線程數(shù)量至少等于運(yùn)行機(jī)器的cpu內(nèi)核數(shù)量。java程序里我們可以通過下面的一行代碼得到這個數(shù)量:Runtime.getRuntime().availableProcessors();
所以最小線程數(shù)量即時cpu內(nèi)核數(shù)量。如果所有的任務(wù)都是計算密集型的,這個最小線程數(shù)量就是我們需要的線程數(shù)。開辟更多的線程只會影響程序的性能,因?yàn)榫€程之間的切換工作,會消耗額外的資源。如果任務(wù)是IO密集型的任務(wù),我們可以開辟更多的線程執(zhí)行任務(wù)。當(dāng)一個任務(wù)執(zhí)行IO操作的時候,線程將會被阻塞,處理器立刻會切換到另外一個合適的線程去執(zhí)行。如果我們只擁有與內(nèi)核數(shù)量一樣多的線程,即使我們有任務(wù)要執(zhí)行,他們也不能執(zhí)行,因?yàn)樘幚砥鳑]有可以用來調(diào)度的線程。
如果線程有50%的時間被阻塞,線程的數(shù)量就應(yīng)該是內(nèi)核數(shù)量的2倍。如果更少的比例被阻塞,那么它們就是計算密集型的,則需要開辟較少的線程。如果有更多的時間被阻塞,那么就是IO密集型的程序,則可以開辟更多的線程。于是我們可以得到下面的線程數(shù)量計算公式:線程數(shù)量=內(nèi)核數(shù)量 / (1 - 阻塞率)
解鎖
請求鎖不成功的線程會被掛起在acquireQueued方法的第12行,12行以后的代碼必須等線程被解鎖鎖才能執(zhí)行,假如被阻塞的線程得到解鎖,則執(zhí)行第13行,即設(shè)置interrupted = true,之后又進(jìn)入無限循環(huán)。
從無限循環(huán)的代碼可以看出,并不是得到解鎖的線程一定能獲得鎖,必須在第6行中調(diào)用tryAccquire重新競爭,因?yàn)殒i是非公平的,有可能被新加入的線程獲得,從而導(dǎo)致剛被喚醒的線程再次被阻塞,這個細(xì)節(jié)充分體現(xiàn)了“非公平”的精髓。通過之后將要介紹的解鎖機(jī)制會看到,第一個被解鎖的線程就是Head,因此p == head的判斷基本都會成功。
至此可以看到,把tryAcquire方法延遲到子類中實(shí)現(xiàn)的做法非常精妙并具有極強(qiáng)的可擴(kuò)展性,令人嘆為觀止!當(dāng)然精妙的不是這個Template設(shè)計模式,而是Doug Lea對鎖結(jié)構(gòu)的精心布局。
解鎖代碼相對簡單,主要體現(xiàn)在AbstractQueuedSynchronizer.release和Sync.tryRelease方法中:?
class AbstractQueuedSynchronizer
class Sync
protected final boolean tryRelease(int releases) { int c = getState() - releases; if (Thread.currentThread() != getExclusiveOwnerThread()) throw new IllegalMonitorStateException(); boolean free = false; if (c == 0) { free = true; setExclusiveOwnerThread(null); } setState(c); return free; }tryRelease與tryAcquire語義相同,把如何釋放的邏輯延遲到子類中。
tryRelease語義很明確:如果線程多次鎖定,則進(jìn)行多次釋放,直至status==0則真正釋放鎖,所謂釋放鎖即設(shè)置status為0,因?yàn)闊o競爭所以沒有使用CAS。?
release的語義在于:如果可以釋放鎖,則喚醒隊(duì)列第一個線程(Head),具體喚醒代碼如下:
這段代碼的意思在于找出第一個可以unpark的線程,一般說來head.next == head,Head就是第一個線程,但Head.next可能被取消或被置為null,因此比較穩(wěn)妥的辦法是從后往前找第一個可用線程。貌似回溯會導(dǎo)致性能降低,其實(shí)這個發(fā)生的幾率很小,所以不會有性能影響。之后便是通知系統(tǒng)內(nèi)核繼續(xù)該線程,在Linux下是通過pthread_mutex_unlock完成。之后,被解鎖的線程進(jìn)入上面所說的重新競爭狀態(tài)。
Lock VS Synchronized
AbstractQueuedSynchronizer通過構(gòu)造一個基于阻塞的CLH隊(duì)列容納所有的阻塞線程,而對該隊(duì)列的操作均通過Lock-Free(CAS)操作,但對已經(jīng)獲得鎖的線程而言,ReentrantLock實(shí)現(xiàn)了偏向鎖的功能。
synchronized的底層也是一個基于CAS操作的等待隊(duì)列,但JVM實(shí)現(xiàn)的更精細(xì),把等待隊(duì)列分為ContentionList和EntryList,目的是為了降低線程的出列速度;當(dāng)然也實(shí)現(xiàn)了偏向鎖,從數(shù)據(jù)結(jié)構(gòu)來說二者設(shè)計沒有本質(zhì)區(qū)別。但synchronized還實(shí)現(xiàn)了自旋鎖,并針對不同的系統(tǒng)和硬件體系進(jìn)行了優(yōu)化,而Lock則完全依靠系統(tǒng)阻塞掛起等待線程。
當(dāng)然Lock比synchronized更適合在應(yīng)用層擴(kuò)展,可以繼承AbstractQueuedSynchronizer定義各種實(shí)現(xiàn),比如實(shí)現(xiàn)讀寫鎖(ReadWriteLock),公平或不公平鎖;同時,Lock對應(yīng)的Condition也比wait/notify要方便的多、靈活的多。
?
?
總結(jié)
以上是生活随笔為你收集整理的JAVA lock 原理讲解的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 现场音乐爱好者福利:苹果地图及 Appl
- 下一篇: premiere如何给视频设置淡入淡出效