日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

linux 死锁分析

發布時間:2025/7/14 53 豆豆
生活随笔 收集整理的這篇文章主要介紹了 linux 死锁分析 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

簡介

死鎖 (deallocks): 是指兩個或兩個以上的進程(線程)在執行過程中,因爭奪資源而造成的一種互相等待的現象,若無外力作用,它們都將無法推進下去。此時稱系統處于死鎖狀態或系統產生了死鎖,這些永遠在互相等待的進程(線程)稱為死鎖進程(線程)。 由于資源占用是互斥的,當某個進程提出申請資源后,使得有關進程(線程)在無外力協助下,永遠分配不到必需的資源而無法繼續運行,這就產生了一種特殊現象死鎖。

一種交叉持鎖死鎖的情形,此時執行程序中兩個或多個線程發生永久堵塞(等待),每個線程都在等待被其它線程占用并堵塞了的資源。例如,如果線程 1 鎖住了記錄 A 并等待記錄 B,而線程 2 鎖住了記錄 B 并等待記錄 A,這樣兩個線程就發生了死鎖現象。在計算機系統中 , 如果系統的資源分配策略不當,更常見的可能是程序員寫的程序有錯誤等,則會導致進程因競爭資源不當而產生死鎖的現象。

產生死鎖的四個必要條件

(1) 互斥條件:一個資源每次只能被一個進程(線程)使用。
(2) 請求與保持條件:一個進程(線程)因請求資源而阻塞時,對已獲得的資源保持不放。
(3) 不剝奪條件 : 此進程(線程)已獲得的資源,在末使用完之前,不能強行剝奪。
(4) 循環等待條件 : 多個進程(線程)之間形成一種頭尾相接的循環等待資源關系。

圖 1. 交叉持鎖的死鎖示意圖:

注釋:在執行 func2 和 func4 之后,子線程 1 獲得了鎖 A,正試圖獲得鎖 B,但是子線程 2 此時獲得了鎖 B,正試圖獲得鎖 A,所以子線程 1 和子線程 2 將沒有辦法得到鎖 A 和鎖 B,因為它們各自被對方占有,永遠不會釋放,所以發生了死鎖的現象。

使用 pstack 和 gdb 工具對死鎖程序進行分析

pstack 在 Linux 平臺上的簡單介紹

pstack 是 Linux(比如 Red Hat Linux 系統、Ubuntu Linux 系統等)下一個很有用的工具,它的功能是打印輸出此進程的堆棧信息。可以輸出所有線程的調用關系棧。

gdb 在 Linux 平臺上的簡單介紹

GDB 是 GNU 開源組織發布的一個強大的 UNIX 下的程序調試工具。Linux 系統中包含了 GNU 調試程序 gdb,它是一個用來調試 C 和 C++ 程序的調試器。可以使程序開發者在程序運行時觀察程序的內部結構和內存的使用情況 .

gdb 所提供的一些主要功能如下所示:

? ? ? 1 運行程序,設置能影響程序運行的參數和環境 ;

? ? ? 2 控制程序在指定的條件下停止運行;

? ? ? 3 當程序停止時,可以檢查程序的狀態;

? ? ? 4 當程序 crash 時,可以檢查 core 文件;

? ? ? 5 可以修改程序的錯誤,并重新運行程序;

? ? ? 6 可以動態監視程序中變量的值;

? ? ? 7 可以單步執行代碼,觀察程序的運行狀態。

gdb 程序調試的對象是可執行文件或者進程,而不是程序的源代碼文件。然而,并不是所有的可執行文件都可以用 gdb 調試。如果要讓產生的可執行文件可以用來調試,需在執行 g++(gcc)指令編譯程序時,加上 -g 參數,指定程序在編譯時包含調試信息。調試信息包含程序里的每個變量的類型和在可執行文件里的地址映射以及源代碼的行號。gdb 利用這些信息使源代碼和機器碼相關聯。gdb 的基本命令較多,不做詳細介紹,大家如果需要進一步了解,請參見 gdb 手冊。

清單 1. 測試程序
#include <unistd.h> #include <pthread.h> #include <string.h> pthread_mutex_t mutex1 = PTHREAD_MUTEX_INITIALIZER; pthread_mutex_t mutex2 = PTHREAD_MUTEX_INITIALIZER; pthread_mutex_t mutex3 = PTHREAD_MUTEX_INITIALIZER; pthread_mutex_t mutex4 = PTHREAD_MUTEX_INITIALIZER; static int sequence1 = 0; static int sequence2 = 0; int func1() { pthread_mutex_lock(&mutex1); ++sequence1; sleep(1); pthread_mutex_lock(&mutex2); ++sequence2; pthread_mutex_unlock(&mutex2); pthread_mutex_unlock(&mutex1); return sequence1; } int func2() { pthread_mutex_lock(&mutex2); ++sequence2; sleep(1); pthread_mutex_lock(&mutex1); ++sequence1; pthread_mutex_unlock(&mutex1); pthread_mutex_unlock(&mutex2); return sequence2; } void* thread1(void* arg) { while (1) { int iRetValue = func1(); if (iRetValue == 100000) { pthread_exit(NULL); } } } void* thread2(void* arg) { while (1) { int iRetValue = func2(); if (iRetValue == 100000) { pthread_exit(NULL); } } } void* thread3(void* arg) { while (1) { sleep(1); char szBuf[128]; memset(szBuf, 0, sizeof(szBuf)); strcpy(szBuf, "thread3"); } } void* thread4(void* arg) { while (1) { sleep(1); char szBuf[128]; memset(szBuf, 0, sizeof(szBuf)); strcpy(szBuf, "thread3"); } } int main() { pthread_t tid[4]; if (pthread_create(&tid[0], NULL, &thread1, NULL) != 0) { _exit(1); } if (pthread_create(&tid[1], NULL, &thread2, NULL) != 0) { _exit(1); } if (pthread_create(&tid[2], NULL, &thread3, NULL) != 0) { _exit(1); } if (pthread_create(&tid[3], NULL, &thread4, NULL) != 0) { _exit(1); } sleep(5); //pthread_cancel(tid[0]); pthread_join(tid[0], NULL); pthread_join(tid[1], NULL); pthread_join(tid[2], NULL); pthread_join(tid[3], NULL); pthread_mutex_destroy(&mutex1); pthread_mutex_destroy(&mutex2); pthread_mutex_destroy(&mutex3); pthread_mutex_destroy(&mutex4); return 0; }
清單 2. 編譯測試程序
[dyu@xilinuxbldsrv purify]$ g++ -g lock.cpp -o lock -lpthread
清單 3. 查找測試程序的進程號
[dyu@xilinuxbldsrv purify]$ ps -ef|grep lock dyu 6721 5751 0 15:21 pts/3 00:00:00 ./lock
清單 4. 對死鎖進程第一次執行 pstack(pstack –進程號)的輸出結果
[dyu@xilinuxbldsrv purify]$ pstack 6721 Thread 5 (Thread 0x41e37940 (LWP 6722)): #0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 #1 0x0000003d1a808e1a in _L_lock_1034 () from /lib64/libpthread.so.0 #2 0x0000003d1a808cdc in pthread_mutex_lock () from /lib64/libpthread.so.0 #3 0x0000000000400a9b in func1() () #4 0x0000000000400ad7 in thread1(void*) () #5 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #6 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 4 (Thread 0x42838940 (LWP 6723)): #0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 #1 0x0000003d1a808e1a in _L_lock_1034 () from /lib64/libpthread.so.0 #2 0x0000003d1a808cdc in pthread_mutex_lock () from /lib64/libpthread.so.0 #3 0x0000000000400a17 in func2() () #4 0x0000000000400a53 in thread2(void*) () #5 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #6 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 3 (Thread 0x43239940 (LWP 6724)): #0 0x0000003d19c9a541 in nanosleep () from /lib64/libc.so.6 #1 0x0000003d19c9a364 in sleep () from /lib64/libc.so.6 #2 0x00000000004009bc in thread3(void*) () #3 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #4 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 2 (Thread 0x43c3a940 (LWP 6725)): #0 0x0000003d19c9a541 in nanosleep () from /lib64/libc.so.6 #1 0x0000003d19c9a364 in sleep () from /lib64/libc.so.6 #2 0x0000000000400976 in thread4(void*) () #3 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #4 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 1 (Thread 0x2b984ecabd90 (LWP 6721)): #0 0x0000003d1a807b35 in pthread_join () from /lib64/libpthread.so.0 #1 0x0000000000400900 in main ()
清單 5. 對死鎖進程第二次執行 pstack(pstack –進程號)的輸出結果
[dyu@xilinuxbldsrv purify]$ pstack 6721 Thread 5 (Thread 0x40bd6940 (LWP 6722)): #0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 #1 0x0000003d1a808e1a in _L_lock_1034 () from /lib64/libpthread.so.0 #2 0x0000003d1a808cdc in pthread_mutex_lock () from /lib64/libpthread.so.0 #3 0x0000000000400a87 in func1() () #4 0x0000000000400ac3 in thread1(void*) () #5 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #6 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 4 (Thread 0x415d7940 (LWP 6723)): #0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 #1 0x0000003d1a808e1a in _L_lock_1034 () from /lib64/libpthread.so.0 #2 0x0000003d1a808cdc in pthread_mutex_lock () from /lib64/libpthread.so.0 #3 0x0000000000400a03 in func2() () #4 0x0000000000400a3f in thread2(void*) () #5 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #6 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 3 (Thread 0x41fd8940 (LWP 6724)): #0 0x0000003d19c7aec2 in memset () from /lib64/libc.so.6 #1 0x00000000004009be in thread3(void*) () #2 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #3 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 2 (Thread 0x429d9940 (LWP 6725)): #0 0x0000003d19c7ae0d in memset () from /lib64/libc.so.6 #1 0x0000000000400982 in thread4(void*) () #2 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #3 0x0000003d19cd40cd in clone () from /lib64/libc.so.6 Thread 1 (Thread 0x2af906fd9d90 (LWP 6721)): #0 0x0000003d1a807b35 in pthread_join () from /lib64/libpthread.so.0 #1 0x0000000000400900 in main ()

連續多次查看這個進程的函數調用關系堆棧進行分析:當進程吊死時,多次使用 pstack 查看進程的函數調用堆棧,死鎖線程將一直處于等鎖的狀態,對比多次的函數調用堆棧輸出結果,確定哪兩個線程(或者幾個線程)一直沒有變化且一直處于等鎖的狀態(可能存在兩個線程 一直沒有變化)。

輸出分析:

根據上面的輸出對比可以發現,線程 1 和線程 2 由第一次 pstack 輸出的處在 sleep 函數變化為第二次 pstack 輸出的處在 memset 函數。但是線程 4 和線程 5 一直處在等鎖狀態(pthread_mutex_lock),在連續兩次的 pstack 信息輸出中沒有變化,所以我們可以推測線程 4 和線程 5 發生了死鎖。

Gdb into thread輸出:

清單 6. 然后通過 gdb attach 到死鎖進程
(gdb) info thread 5 Thread 0x41e37940 (LWP 6722) 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 4 Thread 0x42838940 (LWP 6723) 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 3 Thread 0x43239940 (LWP 6724) 0x0000003d19c9a541 in nanosleep () from /lib64/libc.so.6 2 Thread 0x43c3a940 (LWP 6725) 0x0000003d19c9a541 in nanosleep () from /lib64/libc.so.6 * 1 Thread 0x2b984ecabd90 (LWP 6721) 0x0000003d1a807b35 in pthread_join () from /lib64/libpthread.so.0
清單 7. 切換到線程 5 的輸出
(gdb) thread 5 [Switching to thread 5 (Thread 0x41e37940 (LWP 6722))]#0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 (gdb) where #0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 #1 0x0000003d1a808e1a in _L_lock_1034 () from /lib64/libpthread.so.0 #2 0x0000003d1a808cdc in pthread_mutex_lock () from /lib64/libpthread.so.0 #3 0x0000000000400a9b in func1 () at lock.cpp:18 #4 0x0000000000400ad7 in thread1 (arg=0x0) at lock.cpp:43 #5 0x0000003d1a80673d in start_thread () from /lib64/libpthread.so.0 #6 0x0000003d19cd40cd in clone () from /lib64/libc.so.6
清單 8. 線程 4 和線程 5 的輸出
(gdb) f 3 #3 0x0000000000400a9b in func1 () at lock.cpp:18 18 pthread_mutex_lock(&mutex2); (gdb) thread 4 [Switching to thread 4 (Thread 0x42838940 (LWP 6723))]#0 0x0000003d1a80d4c4 in __lll_lock_wait () from /lib64/libpthread.so.0 (gdb) f 3 #3 0x0000000000400a17 in func2 () at lock.cpp:31 31 pthread_mutex_lock(&mutex1); (gdb) p mutex1 $1 = {__data = {__lock = 2, __count = 0, __owner = 6722, __nusers = 1, __kind = 0, __spins = 0, __list = {__prev = 0x0, __next = 0x0}}, __size = "\002\000\000\000\000\000\000\000B\032\000\000\001", '\000'<repeats 26 times>, __align = 2} (gdb) p mutex3 $2 = {__data = {__lock = 0, __count = 0, __owner = 0, __nusers = 0, __kind = 0, __spins = 0, __list = {__prev = 0x0, __next = 0x0}}, __size = '\000' <repeats 39 times>, __align = 0} (gdb) p mutex2 $3 = {__data = {__lock = 2, __count = 0, __owner = 6723, __nusers = 1, __kind = 0, __spins = 0, __list = {__prev = 0x0, __next = 0x0}}, __size = "\002\000\000\000\000\000\000\000C\032\000\000\001", '\000'<repeats 26 times>, __align = 2} (gdb)

從上面可以發現,線程 4 正試圖獲得鎖 mutex1,但是鎖 mutex1 已經被 LWP 為 6722 的線程得到(__owner = 6722),線程 5 正試圖獲得鎖 mutex2,但是鎖 mutex2 已經被 LWP 為 6723 的 得到(__owner = 6723),從 pstack 的輸出可以發現,LWP 6722 與線程 5 是對應的,LWP 6723 與線程 4 是對應的。所以我們可以得出, 線程 4 和線程 5 發生了交叉持鎖的死鎖現象。查看線程的源代碼發現,線程 4 和線程 5 同時使用 mutex1 和 mutex2,且申請順序不合理。

總結

本文簡單介紹了一種在 Linux 平臺下分析死鎖問題的方法,對一些死鎖問題的分析有一定作用。希望對大家有幫助。理解了死鎖的原因,尤其是產生死鎖的四個必要條件,就可以最大可能地避免、預防和解除死鎖。所以,在系統設計、進程調度等方面注意如何不讓這四個必要條件成立,如何確定資源的合理分配算法,避免進程永久占據系統資源。此外,也要防止進程在處于等待狀態的情況下占用資源 , 在系統運行過程中,對進程發出的每一個系統能夠滿足的資源申請進行動態檢查,并根據檢查結果決定是否分配資源,若分配后系統可能發生死鎖,則不予分配,否則予以分配。因此,對資源的分配要給予合理的規劃,使用有序資源分配法和銀行家算法等是避免死鎖的有效方法。


轉載于:https://blog.51cto.com/linuxkernel/1342435

總結

以上是生活随笔為你收集整理的linux 死锁分析的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

久久久黄视频 | 亚洲乱码精品久久久 | 久久久鲁 | 亚洲aⅴ乱码精品成人区 | 狠狠操狠狠干天天操 | 麻豆久久久久 | 91麻豆精品91久久久久同性 | 看黄色91| 国产亚洲一区二区三区 | 日韩成人精品一区二区三区 | 99re中文字幕 | 色婷婷激情 | 亚洲激情在线播放 | 日本三级香港三级人妇99 | 久久的色 | 日本久久电影 | 日日射av | 天天爱天天草 | 在线观看亚洲视频 | 久久久久免费观看 | 精品欧美一区二区精品久久 | 日韩国产欧美在线播放 | www免费| 综合色久| 97狠狠干 | 久草在线资源免费 | 天天舔夜夜操 | 欧美成人性战久久 | 色婷婷www | av三级av| www.黄色网.com | 国产成人av片 | 青青草国产成人99久久 | 81国产精品久久久久久久久久 | 久久a久久 | 久久国产精品久久精品 | 激情五月五月婷婷 | av中文天堂 | 麻花豆传媒一二三产区 | 国产又粗又猛又爽 | 欧美久久久一区二区三区 | 欧美激情精品久久久久久变态 | av 在线观看 | 国产一区二区久久精品 | 天天搞天天干 | 久久久久久久99精品免费观看 | 国产高清精品在线 | 亚洲黄色app| 久草在线91 | 欧美一二区视频 | 五月婷婷色 | 九九视频网| 久久精品久久99精品久久 | 91大神一区二区三区 | av一区二区三区在线 | 日韩电影久久久 | 狠狠五月天 | 在线免费观看一区二区三区 | 欧美日韩一区二区三区在线观看视频 | 四虎免费在线观看视频 | 日韩精品免费一线在线观看 | 日韩在线免费高清视频 | 免费看片网站91 | 91精品伦理| 日本视频精品 | 国产午夜精品福利视频 | 久久久久久久久久网站 | 天天拍夜夜拍 | 国产成人精品国内自产拍免费看 | 久草视频精品 | 久久精品久久国产 | 国产精品免费久久久久影院仙踪林 | 超碰人人91 | 精品久久1 | 免费视频久久久久 | 日韩精品久久久久久久电影99爱 | 久久精品视频网站 | 久久99精品国产99久久 | 最新av在线网站 | 亚洲欧美日韩在线看 | 国产精品精品久久久 | 男女激情麻豆 | 久久久综合色 | 天天艹天天干天天 | 亚洲午夜小视频 | 天天操夜夜拍 | 国产在线看 | 欧美一区在线观看视频 | 国产美女无遮挡永久免费 | 麻豆精品视频在线观看免费 | 中文字幕91| 国产欧美综合视频 | 久精品在线观看 | 国产日韩精品欧美 | 成人黄色在线视频 | 日韩精选在线 | 免费毛片aaaaaa | 亚洲五月婷 | 天堂av在线网站 | av在线播放中文字幕 | 黄色av电影免费观看 | 久久tv| 欧美视频二区 | 天天操夜夜看 | 91桃色视频| 2022久久国产露脸精品国产 | 7777xxxx| 国产精品va在线观看入 | 欧美综合久久久 | 国产精品美 | 精品国产一区二区在线 | 亚洲香蕉在线观看 | av在线色| 欧美精品久久99 | 天天射天天艹 | 亚洲精品国偷自产在线91正片 | 久久久久国产精品免费 | 白丝av免费观看 | 久久久在线免费观看 | 精品久久久久免费极品大片 | 精品福利视频在线 | 久久都是精品 | 久精品视频免费观看2 | 国产精品久久久久久99 | 国产蜜臀av | 久久久精品午夜 | 日韩综合一区二区 | 夜夜操网| 久久免费看a级毛毛片 | 亚洲精品免费观看视频 | 亚洲精品在线看 | 99爱在线观看 | 日韩欧美精品在线观看视频 | 午夜精品福利一区二区 | 亚洲更新最快 | 亚洲成人资源 | 色噜噜在线观看 | 日韩中文字幕亚洲一区二区va在线 | 天天射天天射 | 久久好看免费视频 | 日本中文不卡 | 久草在线视频网站 | wwwav视频| 在线之家免费在线观看电影 | 中文字幕免费高 | 免费国产在线精品 | 一区二区久久 | 欧美先锋影音 | 九九久久久久久久久激情 | 91香蕉嫩草| 精品欧美一区二区三区久久久 | 免费在线观看国产精品 | 久久成人综合 | 中文字幕一区在线观看视频 | 2019中文最近的2019中文在线 | 亚色视频在线观看 | 伊人五月 | 人人舔人人爽 | 在线观看视频h | 字幕网资源站中文字幕 | 青春草免费视频 | 黄色www在线观看 | 亚洲艳情 | 国产无遮挡又黄又爽在线观看 | 92中文资源在线 | 亚洲综合色视频在线观看 | 久久精国产 | 91九色最新 | 国产中文在线观看 | 天天操天天添天天吹 | 久久成人国产精品 | 在线观看免费高清视频大全追剧 | 久久精选 | 美州a亚洲一视本频v色道 | 国产视频在线观看一区二区 | 一区二区三区在线看 | 成人一区二区三区在线 | 婷婷香蕉 | 国产精品久久电影网 | 中文字幕有码在线播放 | 99精品视频免费观看视频 | 91精品国产91p65 | 97色在线观看免费视频 | 91在线日本 | 久一在线 | 中文字幕亚洲不卡 | 欧美精品久久久久久久久久丰满 | 中文字幕在 | 婷婷色在线观看 | 涩涩网站免费 | 91久久偷偷做嫩草影院 | 中文永久免费观看 | 成人在线播放视频 | 国产一级高清 | 黄色一级在线免费观看 | 亚洲高清91 | 日韩精品一区二区在线 | 波多野结衣在线视频免费观看 | 亚洲国产精品电影在线观看 | 亚洲免费激情 | 成人观看视频 | 久久国产精品免费 | 亚洲国产精品成人综合 | 91热精品 | 在线观看黄 | 国产亚洲精品电影 | 国产高清不卡在线 | 久久99久久99精品免观看粉嫩 | 亚洲www天堂com | 亚洲韩国一区二区三区 | 国产亚洲婷婷免费 | 亚洲欧美国产视频 | 黄影院 | 久久精品久久99 | 欧美性大胆 | 日韩理论在线 | 最新极品jizzhd欧美 | 国产a高清| 欧美一区二区三区免费观看 | 91中文在线 | 99久热精品 | 精品一区二区亚洲 | 天天操天天色天天射 | 人人干干人人 | 精品国产_亚洲人成在线 | 久草网免费 | 美女网站久久 | 亚洲黄a | 日批网站免费观看 | 69亚洲视频| 欧美激情综合五月色丁香小说 | 在线视频日韩一区 | 久久精品亚洲一区二区三区观看模式 | 免费黄色a网站 | 国产最新精品视频 | 亚洲婷婷在线 | 国产精品高清免费在线观看 | 国产精品爽爽久久久久久蜜臀 | 天天操天天综合网 | 午夜视频亚洲 | 成人一级黄色片 | 中国一级片在线播放 | 性色av免费观看 | 精品免费久久久久 | 天天射天天做 | 久久久亚洲网站 | 综合铜03| 97视频久久久 | 国产探花视频在线播放 | 欧美-第1页-屁屁影院 | 在线激情影院一区 | 日韩婷婷 | 国产无遮挡又黄又爽在线观看 | 久久草在线精品 | 成人午夜黄色 | 五月天网页 | 91av视频免费在线观看 | 日韩av中文字幕在线免费观看 | 天天干天天干天天干 | 久久精品一二三 | 日韩精品在线观看视频 | 韩日av一区二区 | 国产高清在线一区 | 伊人www22综合色 | 色噜噜狠狠狠狠色综合 | 首页国产精品 | 午夜体验区 | 狠狠色综合欧美激情 | 日韩精品视频一二三 | 81精品国产乱码久久久久久 | 人人爽人人爽人人片 | 久久久久久国产一区二区三区 | 日韩免费av片 | 99色人| 91亚洲精品国偷拍自产在线观看 | 91av蜜桃| 91精品国产成人观看 | 久久精品黄 | 99久久er热在这里只有精品15 | 五月天六月婷婷 | 日韩网站在线免费观看 | 久久国产精品色婷婷 | 欧美夫妻性生活电影 | 男女激情免费网站 | 欧美91精品久久久久国产性生爱 | 色婷婷成人网 | 久久久精品 一区二区三区 国产99视频在线观看 | 国产91精品久久久久久 | 国精产品999国精产 久久久久 | av高清免费在线 | 91精彩视频在线观看 | 2024av在线播放 | 久久99国产综合精品免费 | 久久在线免费视频 | 91九色视频国产 | 最近中文字幕完整高清 | 久久精品网| 精品一区二区免费 | 天天综合网 天天 | 天天激情综合网 | 亚洲欧洲xxxx | 91福利视频一区 | av一区二区三区在线 | 国产日韩在线视频 | 人人干人人上 | a v在线视频 | 亚洲免费观看视频 | 精品电影一区二区 | 国产成人精品亚洲日本在线观看 | 91成人精品在线 | 好看的国产精品视频 | 黄p在线播放 | 国产日本在线观看 | 天天干天天操天天干 | 香蕉视频在线免费 | 99精品视频免费看 | 午夜a区 | av天天草 | 中文字幕亚洲欧美日韩2019 | 精品视频免费观看 | 日韩mv欧美mv国产精品 | 97国产在线播放 | 亚洲六月丁香色婷婷综合久久 | 国产精品久久久久久麻豆一区 | 日韩av在线影视 | 亚洲国产日韩欧美 | 日韩av视屏在线观看 | 青草视频在线播放 | 超碰人人国产 | 五月天,com| 久久国产精品一区二区三区 | 人人射人人澡 | 中文字幕第一页在线视频 | 国产一级免费在线观看 | 国产精品精品久久久 | 中文字幕之中文字幕 | 一本一本久久a久久精品牛牛影视 | 国产精品久久久久一区二区三区 | 国产人免费人成免费视频 | 国产韩国精品一区二区三区 | 日批网站免费观看 | 婷婷丁香在线观看 | 久久免费高清 | 999色视频 | 91完整版观看| 国产91精品一区二区麻豆亚洲 | 2022久久国产露脸精品国产 | 久久高清 | 亚洲精品三级 | 中文一二区| 成人日批视频 | 久久69精品久久久久久久电影好 | www.在线观看视频 | 草久久av| 日韩欧美在线综合网 | 91精品久久香蕉国产线看观看 | 青青河边草免费 | 国产又粗又猛又爽又黄的视频先 | 欧美视频在线观看免费网址 | 国产98色在线 | 日韩 | 九九综合九九 | 久久久精品影视 | 免费日韩一区二区 | 丁香婷婷电影 | 国产精品久久久久久久久久妇女 | 欧美 日韩 成人 | 黄色软件在线观看 | 丁香婷婷久久久综合精品国产 | 99热这里有 | 国产精品自产拍在线观看桃花 | av在线进入 | 亚洲一片黄| 成人a大片 | 国产亚洲精品久久久久久电影 | av片在线看| 国产成人1区 | 悠悠av资源片 | 亚洲成人免费在线观看 | 国产97色在线 | 国产精品久久久99 | 欧美另类人妖 | 久久综合久久久 | 三级黄色a | 久久久久免费精品视频 | 色网站视频 | 在线免费中文字幕 | 久久激情电影 | 91久久精品一区二区二区 | 91免费网址 | 美女网站色免费 | 国产成人亚洲在线观看 | 97精品国产| 99久久99久久免费精品蜜臀 | 久久久资源网 | 欧美日韩18 | 国产成人精品综合久久久 | 蜜臀aⅴ精品一区二区三区 久久视屏网 | 欧美在线观看禁18 | av免费片| 91网站免费观看 | a黄色| 欧美污在线观看 | 日韩在线高清 | 欧美日韩在线播放 | 美女黄视频免费看 | 欧美精品久久久久性色 | 超碰97在线人人 | 久久亚洲影院 | 亚洲精品www久久久久久 | 亚洲精品午夜久久久久久久久久久 | 91av电影网 | 韩国精品在线 | av中文字幕剧情 | 超碰97成人 | 人人添人人 | www久 | 一区二区三区在线免费观看 | 色欧美综合 | 日韩欧美一二三 | 国产精品手机在线观看 | 日韩av在线小说 | 成人午夜剧场在线观看 | 国产成人61精品免费看片 | 欧美性黄网官网 | 在线黄色av电影 | 97人人爽人人 | 一级黄色电影网站 | 日韩欧美视频 | 五月天视频网 | 久久国产一区二区 | 91精品综合在线观看 | 中文字幕在线观看一区二区 | 国产剧情一区二区在线观看 | 中文字幕a∨在线乱码免费看 | 久久激情视频网 | 黄p在线播放 | 麻豆国产网站入口 | 国产美腿白丝袜足在线av | 韩国av免费观看 | 97超碰影视 | 亚洲高清网站 | 伊人婷婷网 | 99在线观看视频网站 | 国产精品日韩久久久久 | 欧美日韩高清一区二区 国产亚洲免费看 | 天天操天天草 | 国产在线色站 | 高清国产午夜精品久久久久久 | 三级av网站 | 在线免费性生活片 | 激情婷婷网 | 久久6精品| 亚洲精品456在线播放 | 日韩欧美国产视频 | 国产亚洲在线观看 | 久热超碰 | 久久久免费少妇 | 中文有码在线 | 在线免费看片 | 成人h视频在线 | 一区二区三区视频在线 | 97免费在线视频 | 黄色1级毛片| 亚洲精品动漫在线 | 国产黄色片免费看 | 国产精品久久久久久久久久三级 | www.天天色.com | 日韩黄在线观看 | 日韩在线视频看看 | 成人免费看电影 | 亚洲伊人成综合网 | 麻豆视频一区 | 国产成人香蕉 | 色偷偷88888欧美精品久久久 | 国产精品午夜在线观看 | 国产精品久久9 | 中文字幕av网站 | 久久艹在线观看 | 91色影院| 久久午夜免费视频 | 中文字幕 国产视频 | 观看免费av | 日韩,精品电影 | 国产亚洲激情视频在线 | 96精品高清视频在线观看软件特色 | 草草草影院 | 精品91视频| 91精品国产91久久久久久三级 | 亚洲在线免费视频 | 伊人天天综合 | 九九视频在线播放 | 日韩在线免费视频 | 91精品国产乱码在线观看 | 日韩av不卡在线观看 | 国产高清视频免费观看 | 国产免费一区二区三区最新6 | 麻豆av一区二区三区在线观看 | 久久久久久久国产精品影院 | 99久久精品无码一区二区毛片 | 在线国产不卡 | 夜夜爽www| 国产特级毛片 | 国产一级免费片 | 国产精品久久婷婷六月丁香 | 国产精品麻豆91 | 亚洲精品字幕 | 天堂久色 | 黄色网在线播放 | 91在线永久| 制服丝袜亚洲 | 少妇bbw撒尿| 久久66热这里只有精品 | 91精品国产自产在线观看 | 日韩av在线资源 | 天天操天天色天天射 | 国产原创在线观看 | 在线小视频你懂得 | 手机在线看片日韩 | 91夫妻视频 | 亚洲成人精品在线 | 亚洲日本精品视频 | 亚洲精品国产综合久久 | 国产日产欧美在线观看 | 午夜视频在线观看一区二区三区 | 色综合久久久久久久久五月 | 深爱开心激情网 | 日韩视频欧美视频 | 97在线免费观看视频 | 国产 日韩 在线 亚洲 字幕 中文 | 日本一区二区高清不卡 | 日韩在线观看不卡 | 99中文字幕视频 | 五月开心色 | 亚洲天堂精品视频在线观看 | 亚洲国产精品成人女人久久 | av天天草| 亚洲成aⅴ人在线观看 | 久久久久五月天 | 久久视频国产精品免费视频在线 | 日韩三级视频在线看 | 国产一区二区三精品久久久无广告 | 天天干天天操av | 久久久福利视频 | 香蕉久久久久久av成人 | 国产美女在线观看 | 中文字幕av一区二区三区四区 | 国产在线 一区二区三区 | 久久毛片网站 | 97色视频在线 | 久久99影院 | 日韩色高清| 中文字幕在线免费看 | 日韩在线视频一区二区三区 | 午夜久久影院 | 久久字幕精品一区 | 国产91精品在线播放 | 久久超级碰视频 | 精品国产视频在线 | 久久精品这里精品 | 91精品国产一区二区三区 | 久久久影院官网 | 亚洲黄色在线播放 | 欧美人体xx | 日韩精品免费在线播放 | 天天操天天射天天爱 | 久久这里有精品 | 中文字幕日韩精品有码视频 | av日韩精品 | 一区二区三区福利 | 久久av不卡 | 色婷婷久久 | 成人黄色片在线播放 | 国产在线理论片 | 毛片在线播放网址 | 国产精品免费视频久久久 | 99精品视频网站 | 久草在线手机观看 | 亚洲欧美激情精品一区二区 | 四虎永久网站 | 日韩三级免费 | 五月婷婷爱 | 免费看黄色小说的网站 | 美女免费视频网站 | 成人影片在线免费观看 | av在线h| 欧美无极色 | 欧美少妇xxxxxx | 五月婷婷丁香在线观看 | 在线黄色国产电影 | 国产精品国产三级在线专区 | 91精品国自产拍天天拍 | 久久99视频精品 | 九九在线国产视频 | 亚洲专区 国产精品 | 在线免费试看 | 456免费视频 | 人人舔人人插 | 奇米777777| www.亚洲视频.com | 九九久久成人 | 久久精品aaa | 免费在线国产视频 | 91精品综合在线观看 | 在线电影 你懂得 | 激情视频免费在线观看 | 国产精品高清一区二区三区 | 国产精品露脸在线 | 欧美另类人妖 | 免费在线观看成年人视频 | 久久国内精品视频 | 特级黄录像视频 | 国产精品美女久久久久久久久久久 | 国产人成一区二区三区影院 | 日韩精品久久久免费观看夜色 | 91av电影| 97理论电影 | 人成在线免费视频 | 黄色三级av | 免费的国产精品 | 久草在线 | 97日日碰人人模人人澡分享吧 | 亚洲日本va午夜在线电影 | 亚洲精品资源在线观看 | 成人av免费在线 | 日韩网站在线播放 | 欧美不卡在线 | 国产99久久99热这里精品5 | 97人人超碰在线 | 91精品在线观看视频 | 亚洲永久字幕 | 欧美男男激情videos | 亚洲国产精品成人va在线观看 | 91在线视频一区 | 天天色天天综合 | 免费色婷婷 | 一级性生活片 | 精品福利在线视频 | 久久久久久久久久久久影院 | 欧美大片在线观看一区 | 国产精品99久久久久的智能播放 | 国产一区在线视频 | 国产特级毛片aaaaaaa高清 | 一区 二区电影免费在线观看 | 日本中文字幕在线播放 | 色吊丝在线永久观看最新版本 | 中字幕视频在线永久在线观看免费 | 欧美激精品| 国产美女永久免费 | 国产99久久久精品 | 91桃色免费观看 | 国产视频在线观看一区 | 欧美日韩视频在线观看免费 | 天堂va在线高清一区 | 99亚洲精品 | 亚洲国产精品传媒在线观看 | 亚洲精品在线视频观看 | 欧美激情视频久久 | 亚洲精品自拍 | 99r在线播放| 在线免费黄色av | 日韩专区在线播放 | 波多野结衣一区二区三区中文字幕 | 丰满少妇高潮在线观看 | 又污又黄网站 | 欧美aⅴ在线观看 | 国产一二三精品 | 久久99精品视频 | 国产精品va在线观看入 | 麻豆果冻剧传媒在线播放 | 制服丝袜在线 | 99精品国产在热久久下载 | 国产精品99久久免费观看 | 欧美日韩午夜 | 日韩电影中文字幕 | 91九色视频国产 | 天天色成人| 亚洲黄色一级视频 | 国产精品久久久久久久av大片 | 国产一级视频在线 | 国产成人久久精品 | 日韩在线色| 国产九九九九九 | 欧美9999| 国产专区视频 | 中文字幕一区二区三区在线播放 | 国内精品久久久久久久久久久久 | 亚洲资源在线观看 | 国产男女无遮挡猛进猛出在线观看 | 国内精品在线一区 | 一区二区精品在线观看 | 成人国产精品入口 | 黄色三级免费 | 日韩在线精品 | 91视频观看免费 | 亚洲 中文 欧美 日韩vr 在线 | 最近最新最好看中文视频 | 天天翘av| 丁香婷婷综合五月 | 一级免费看视频 | 国内精品免费久久影院 | 欧美亚洲另类在线视频 | www91在线观看 | 国产一区二区三区免费视频 | 精品国产伦一区二区三区观看说明 | 亚洲91中文字幕无线码三区 | 高清精品久久 | 国产视频在线观看一区二区 | 国产综合在线视频 | 久久综合影视 | 亚洲精品免费看 | 一区二区视频在线看 | 国产人成一区二区三区影院 | 九色精品免费永久在线 | www.五月天 | 激情久久伊人 | 又色又爽又黄 | 中文字幕最新精品 | 成人国产电影在线观看 | 激情五月伊人 | 亚洲人成在线电影 | 日日夜夜天天综合 | www亚洲视频| 国产黄在线 | 99爱国产精品 | 尤物一区二区三区 | 久久狠狠一本精品综合网 | 国产精品 国产精品 | 欧美日韩精品二区第二页 | 国产一区高清在线 | 天天夜夜亚洲 | 久久国产精品99国产精 | 亚洲经典视频在线观看 | 国产精品久久一区二区三区不卡 | 91免费视频国产 | 精品一区在线 | 国产午夜三级 | 欧美精品久久久久久久久久久 | 91激情在线视频 | 黄色av电影一级片 | 久久综合久久综合这里只有精品 | 亚州性色| 久久久久久免费视频 | 国产精品视频999 | 一区二区三区在线免费观看 | 久久高清免费 | 天天综合色网 | 精品99免费 | 免费av在线| 日韩中文免费视频 | 黄av免费| 区一区二区三区中文字幕 | 中文字幕一区在线 | 免费大片黄在线 | 亚洲精品乱码久久久久久蜜桃动漫 | 超碰国产97 | 在线播放国产精品 | 九九视频在线 | www.干| 狠狠色丁香婷婷综合橹88 | 91成人精品国产刺激国语对白 | 国产精品久久久久久久久久久不卡 | 欧美va天堂va视频va在线 | 在线影院av | 可以免费看av | 国产91小视频| 婷婷色五| 国产电影黄色av | 久草在线观看视频免费 | 久草在线资源免费 | 永久精品视频 | 日韩成人精品一区二区三区 | 九九九在线观看视频 | 国产亚洲精品精品精品 | 国产伦精品一区二区三区无广告 | 五月天伊人 | 成人国产精品 | 国产免费成人 | 天天操天天摸天天爽 | 黄色毛片视频免费观看中文 | 夜夜躁日日躁狠狠久久av | 欧洲精品码一区二区三区免费看 | 美腿丝袜一区二区三区 | 中文字幕网站视频在线 | 丁香久久婷婷 | 国产免费不卡av | 去看片 | 国产资源中文字幕 | 亚洲综合婷婷 | 亚洲日b视频 | 91成人网在线 | 玖玖色在线观看 | 国产拍揄自揄精品视频麻豆 | 夜夜爽天天爽 | 2018好看的中文在线观看 | 久久免费国产精品1 | 国内精品久久久久影院一蜜桃 | 少妇视频在线播放 | av大全在线看 | 丁香狠狠| 伊人亚洲精品 | 亚洲精品视频偷拍 | 日韩专区在线播放 | 欧美特一级 | 国产精品久久久久久久免费大片 | 亚洲年轻女教师毛茸茸 | 国产永久免费高清在线观看视频 | 91色在线观看 | 就要干b | 日韩在线视频一区二区三区 | 韩国av永久免费 | 成人av高清 | 日韩欧美在线视频一区二区三区 | 91网站在线视频 | 国产日本亚洲 | 欧美日韩国产二区 | 免费在线黄网 | 天天爱天天操天天干 | 毛片基地黄久久久久久天堂 | 在线免费黄 | 国产一区二区精品久久91 | 国产三级视频 | 五月激情站 | 久久avav| 综合久久精品 | h动漫中文字幕 | 五月天最新网址 | 女人魂免费观看 | 毛片区| 久久精品高清视频 | 91麻豆精品国产91久久久无限制版 | 黄色福利网 | 一区久久久 | 久久久精品免费观看 | 免费不卡中文字幕视频 | 亚洲精品女人 | 国产视频一区二区在线 | 九色精品免费永久在线 | 婷色在线| 狠狠婷婷 | 免费在线观看av不卡 | 成人av影视 | 成人在线免费小视频 | 国内外成人免费在线视频 | 日本中文字幕网址 | 婷婷成人亚洲综合国产xv88 | 久爱综合 | 娇妻呻吟一区二区三区 | 毛片视频电影 | 亚洲日韩中文字幕 | 免费在线观看黄网站 | 亚州精品在线视频 | 91精品久久香蕉国产线看观看 | 在线观看中文字幕一区 | 亚洲伦理中文字幕 | 亚洲一区二区视频 | 美女福利视频一区二区 | 国产精品成人自产拍在线观看 | 激情婷婷在线观看 | 久久高清国产 | 亚洲一一在线 | 最新99热 | 黄色av免费电影 | 五月婷婷丁香在线观看 | 青青河边草观看完整版高清 | 精品国产乱码一区二区三区在线 | 91网页版在线观看 | 国产亚洲精品成人 | 国产手机在线观看视频 | 婷婷丁香在线 | 狠狠插天天干 | 久久乱码卡一卡2卡三卡四 五月婷婷久 | 九九热免费在线观看 | 精品国产一区二区三区男人吃奶 | 日韩剧情 | 91精品麻豆 | 天堂中文在线视频 | 99精品在线免费 | 天天草天天色 | 国产91国语对白在线 | 日日噜噜噜噜夜夜爽亚洲精品 | 亚洲欧美日韩国产一区二区三区 | 91免费版在线观看 | 日韩二区三区 | 日韩激情片在线观看 | 91视频免费网址 | 国产精品国产三级国产aⅴ无密码 | 国产精品久久久久av福利动漫 | 亚洲涩涩涩 | 国产黄免费在线观看 | 免费黄色av电影 | 欧美激情视频一区 | 四虎永久国产精品 | 久久96国产精品久久99软件 | www.色午夜.com | 夜夜躁天天躁很躁波 | 一本色道久久综合亚洲二区三区 | 日韩电影在线观看一区 | 91看片在线免费观看 | 一区二区理论片 | 99久久日韩精品免费热麻豆美女 | 欧美日韩视频一区二区 | 亚洲色图美腿丝袜 | 欧美日本一二三 | 六月丁香婷 | 黄色免费在线看 | 国产精品久久久久久久婷婷 | 国产精品久久久久久久久久免费 | 91福利影院在线观看 | 久久免费视频一区 | 日韩免费三区 | 精品美女在线视频 | 精品国产91亚洲一区二区三区www | 在线观看福利网站 | 激情五月婷婷激情 | 97视频网址| 五月天六月丁香 | 久久最新网址 | 在线观看精品一区 | 九月婷婷人人澡人人添人人爽 | 日韩欧美精品在线视频 | 日本黄色黄网站 | 久久国产精品一区二区三区 | 99精品欧美一区二区三区 | 欧美 日韩 国产 中文字幕 | 激情视频一区二区三区 | 国产亚洲一级高清 | 婷婷色视频 | 日本中文字幕在线电影 | 国产在线播放一区二区三区 | 国产欧美中文字幕 | 日韩手机在线观看 | 久久午夜免费视频 | 欧美精品乱码久久久久 | 免费av网址在线观看 | 日韩高清在线看 | 国产亚洲观看 | 欧美日韩在线播放一区 | 免费日韩一区二区 | 精品国产一区二区三区久久久久久 | 国产精品av免费观看 | 91精品福利在线 | 久久久国产精品人人片99精片欧美一 | 国产人成免费视频 | 午夜国产一区二区三区四区 | 麻豆播放 | 精品久久久久免费极品大片 | 99热.com | 不卡电影一区二区三区 | 国产精品久久久久久欧美 | 日韩激情免费视频 | 欧美另类交在线观看 | 国产成视频在线观看 | 天天综合网 天天综合色 | 九九精品视频在线观看 | 欧美日韩视频在线观看一区二区 | www,黄视频 | 亚洲欧美日韩精品久久奇米一区 | 久久精品一区二区三区四区 | 国产 一区二区三区 在线 | 国产精品1区2区3区在线观看 | 在线观看中文字幕第一页 | 91影视成人 | 2019天天干夜夜操 | 人人干人人爽 | 日韩va欧美va亚洲va久久 | 精品国产免费一区二区三区五区 | 久久草精品 | 国产999精品久久久久久麻豆 | 天天狠狠干 | 激情婷婷在线观看 | 国产在线高清精品 | 久草在线视频网站 | 最近中文国产在线视频 | 久草热久草视频 | 久久免费精品国产 | 国产精品福利小视频 | 国产精品自产拍 | 三级视频国产 | 国产h片在线观看 | 日韩av影视| 久久精品一区二区三区中文字幕 | 91成人免费观看视频 | 最新国产在线视频 | 最新精品视频在线 | 欧洲精品码一区二区三区免费看 | 热99在线视频 | 国产原创中文在线 | 久久久国产精品网站 | 国产高清视频免费观看 | 日韩| 久久亚洲热 | 日韩国产高清在线 | 国产精品一区二区久久精品爱涩 | 久久精品96 | 亚州精品成人 | 久久美女免费视频 | 三级视频日韩 | 美女网站久久 |