日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > linux >内容正文

linux

转 Linux块设备加速缓存bcache和dm-cache 使用SSD来加速服务器

發布時間:2024/3/26 linux 55 豆豆
生活随笔 收集整理的這篇文章主要介紹了 转 Linux块设备加速缓存bcache和dm-cache 使用SSD来加速服务器 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

分享一下我老師大神的人工智能教程!零基礎,通俗易懂!http://blog.csdn.net/jiangjunshow

也歡迎大家轉載本篇文章。分享知識,造福人民,實現我們中華民族偉大復興!



dm-cache 與 bcache

在 LSFMM 2013 峰會上,Mike Snitzer, Kent Overstreet, Alasdair Kergon, 和 Darrick Wong 共同主持了一個討論,內容是關于兩個彼此獨立的塊設備層緩存方案 —— dm-cachebcache。?Snitzer 首先介紹了 3.9 kernel 引入的 dm-cache。這個方案使用率內核中的 device mapper 框架,實現了快速設備對慢速的“原始”設備的 writeback 或 writethrough 緩存。Snitzer 介紹到,dm-cache 的原理是使用 device mapper 核心,并在上面增加一個策略層。這個策略層“非常類似”一個插件接口,可以實現不同的策略。這些策略(以及緩存的內容)決定了緩存是否可以命中,是否需要進行數據遷移(在原始設備與緩存設備之間進行某個方向的數據移動)。目前已經實現了包括最近最少用(LRU)、最常使用(MFU)等策略,但目前只有缺省的“mq”策略合并到內核中了,以便減少起初需要測試到的策略數量。文件系統可以為策略提供 hints,比如某些塊臟了,或是某些塊已經被放棄了。這些信息有助于策略更好地決定塊要存儲到的位置。之后,Overstreet 介紹了 bcache 的狀態更新,后者已經在排隊進入 3.10 了。他介紹到,bcache 已經有“很多用戶”了,而且代碼已經比較穩定了。他最近主要是在進行 bug fix。與 dm-cache 實現的的分級存儲不同,按照 Overstreet 的介紹,bcache 更像一個傳統的緩存。它可以用來存儲任何 extents,甚至是是一個扇區,而 dm-cache 只能對整塊數據進行緩存。就在峰會開始前,Wong 給多個郵件列表(包括 dm-devel, linux-bcache, linux-kernel)發出過一封 email 來比較 bcache, dm-cache, 和 EnhanceIO。他分別編譯了帶有上述各個特性的內核,進行了一些測試。他發現,EnhanceIO 是最慢的,bcache 是它的 4-6 倍,而 dm-cache 更快,達到了 15 倍,不過 dm-cache 無法完成有些測試。所有比較都在一塊普通硬盤上進行了相同的測試,有時,由于未知的原因,dm-cache 的表現或多或少的和硬盤完全一樣。他指出,有些測試會導致 mkfs 創建的 inode table 倍緩存住,而通常這并不是一種有效的使用緩存的方法。Snitzer 表示,他曾試著去重現 Wong 的測試結果,但結果對 bcache 和 dm-cache 都得倒了更差的成績。他說他希望和 Overstreet 一起去找出原因。而 Overstreet 則表示,不應該過多地看綜合測試的成績,這些測試是游泳的,但可能帶有誤導性。Ric Wheeler 提問,Snitzer 是否“在真實工作負載下看到了實質性的性能提升”,Snitzer提到,在不同的 Git 標簽之間進行切換就是 dm-cache 可以完勝的一個例子,不過他需要一些幫助來獲得更貼近實際使用的負載。一個參會者問道,這些方案是否假設緩存設備總是存在。Snitzer 說,dm-cache 確實如此假設,但這是需要改進的地方。Overstreet 說, bcache 并不要求 cache 設備一直都在。因為 bcache 已經在實際產品中使用了,所以它有機會去碰到這些疑難場景,并可以處理這些緩存設備無法工作的情形。Snitzer 表示,dm-cache 確實還有很多事情要做。起初,它是進行 cache 和原始設備的并行 IO,但最終不得不回到順序 IO。而且,對于流水線中有 NVM 設備的情況下,存儲層次也是如此。因為 dm “到處都是分層”,dm-cache 剛好適合進行存儲分層,不過 Overstreet 指出,bcache 也可以做到分級存儲。這個討論最終沒有一個明確的結論,只是提到需要讓兩個方案的“真實世界”性能讀數變得更好。同時也指出了,不同的測試者進行的測試得到的結論差異是巨大的,這也是真實世界的情況的一個寫照。
- See more at: http://wangxu.me/blog/#sthash.smQmCr76.dpuf?

文章來源:http://blog.csdn.net/cybertan/article/details/9475767






Linux塊設備加速緩存之bcache



什么是bcache
bcache是linux內核塊層cache。它使用類似SSD來作為HDD硬盤的cache,從而起到加速作用。HDD硬盤便宜并且空間更大,SSD速度快但更貴。如果能兩者兼得,豈不快哉?bcache能做到。bcache使用SSD作為其他塊設備cache。類似ZFS的L2Arc,但bcache還增加了寫回策略,并且是與文件系統無關的。bcache被設計成只需要最小的代價,無需配置就能在所有環境中工作。默認狀態下bcache不緩存順序IO,只緩存隨機讀寫。bcache適用于桌面、服務器,高級存儲陣列,甚至是嵌入式環境。

設計bcache目標是讓被緩存設備與SSD一樣快(包括緩存命中、緩存不命中、透寫和回寫)。現在還未達到初衷,特別是順序寫。同時測試結果表明離目標很接近,甚至有些情況下表現更好,例如隨機寫。bcache是數據安全的。對于寫回策略緩存來說,可靠性是非常重要的,出錯就意味著丟失數據。bcache是用電池備份陣列控制器的替代選擇,同時也要求bcache在異常掉電時也是數據安全的。對于寫而言,必須在所有數據寫到可靠介質之后才能向上層返回寫成功,在異常掉電情況下,寫不能是部分完成的。大量工作已經投入到這部分數據安全的工作中。

bcache性能設計目標是等同于SSD。最大程度上去最小化寫放大,并避免隨機寫。bcache將隨機寫轉換為順序寫,首先寫到SSD,然后回寫緩存使用SSD緩存大量的寫,最后將寫有序寫到磁盤或者陣列上。對于RAID6陣列,隨機寫性能很差,還要花費不菲的價格購買帶有電池保護的陣列控制器。現在有了bcache,你就可以直接使用linux自帶的優秀軟RAID,甚至可以在更廉價的硬件上獲取更高的隨機寫性能。
特性1、一個緩存設備可以作為多個設備的緩存,并且可以在設備運行時動態添加和刪除緩存。2、異常關機恢復,只有當寫到磁盤后緩存才會確認寫完成。3、正確處理寫阻塞和刷緩存4、支持writethrough, writeback和writearound5、檢測并避開順序IO(可配置關閉該選項)6、當檢測到SSD延遲超過配置邊界值,減少到SSD流量(當一個SSD作為多個磁盤緩存時使用)7、緩存不命中時預讀(默認關閉)8、高性能的writeback實現:臟數據都是排序后再回寫。如果設置了writeback水位線,PD控制器會根據臟數據比例來平滑處理到后臺writeback流量。9、使用高效率了B+樹,bcache隨機讀可以達到1M IOPS10、穩定,已經有產品應用

性能
7/25/12 隨機測試在我的測試機上,我將SSD盤劃分為兩個相同大小的分區,一個分區用于測試SSD裸盤,另一個作為硬盤緩存。bcache配置修改:cache_mode設置為writeback,writeback_percent設置為40。(如果writeback_percent不為0,bcache使用PD控制器根據緩存的臟數據塊來平滑處理下發到磁盤的流量)。同時還關閉了擁塞閥值,因為當SSD延遲達到極限時,如果bcache切換到writethrough將會影響結果。

SSD盤為Intel 160G MLC SSD,也就是Intel SSDSA2M160。FIO作為性能測試,測試腳本如下:[global] randrepeat=1 ioengine=libaio bs=4k ba=4k size=8G direct=1 gtod_reduce=1 norandommap iodepth=64FIO運行在SSD裸設備上,但對于這類性能測試軟件來說應該沒有影響。
裸SSD設備上隨機寫測試結果如下:root@utumno:~# fio ~/rw4krandwrite: (g=0): rw=randwrite, bs=4K-4K/4K-4K, ioengine=libaio, iodepth=64fio 1.59Starting 1 processJobs: 1 (f=1): [w] [100.0% done] [0K/49885K /s] [0 /12.2K iops] [eta 00m:00s]randwrite: (groupid=0, jobs=1): err= 0: pid=1770? write: io=8192.3MB, bw=47666KB/s, iops=11916 , runt=175991msec? cpu????????? : usr=4.33%, sys=14.28%, ctx=2071968, majf=0, minf=19? IO depths??? : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%???? submit??? : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%???? complete? : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%???? issued r/w/d: total=0/2097215/0, short=0/0/0Run status group 0 (all jobs):? WRITE: io=8192.3MB, aggrb=47666KB/s, minb=48810KB/s, maxb=48810KB/s, mint=175991msec, maxt=175991msecDisk stats (read/write):? sdb: ios=69/2097888, merge=0/3569, ticks=0/11243992, in_queue=11245600, util=99.99%
添加了bcache:root@utumno:~# fio ~/rw4krandwrite: (g=0): rw=randwrite, bs=4K-4K/4K-4K, ioengine=libaio, iodepth=64fio 1.59Starting 1 processJobs: 1 (f=1): [w] [100.0% done] [0K/75776K /s] [0 /18.5K iops] [eta 00m:00s]randwrite: (groupid=0, jobs=1): err= 0: pid=1914? write: io=8192.3MB, bw=83069KB/s, iops=20767 , runt=100987msec? cpu????????? : usr=3.17%, sys=13.27%, ctx=456026, majf=0, minf=19? IO depths??? : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%???? submit??? : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%???? complete? : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%???? issued r/w/d: total=0/2097215/0, short=0/0/0Run status group 0 (all jobs):? WRITE: io=8192.3MB, aggrb=83068KB/s, minb=85062KB/s, maxb=85062KB/s, mint=100987msec, maxt=100987msecDisk stats (read/write):? bcache0: ios=0/0, merge=0/0, ticks=0/0, in_queue=0, util=0.00%
添加了bcache之后IOPS為18.5K,裸SSD設備為12.2K。bcache表現更佳是因為bcache按順序將寫請求發送到SSD,但額外加入了更新索引的開銷。bcache對隨機寫做了優化,bcache還從高IO深度(64)獲益,因為在高IO深度的情況下就可以將多次下標更新合并為一次寫請求。高IO深度就代表著高系統負載,當IO深度下調時IOPS也出現變化:

IO depth of 32: bcache 20.3k iops, raw ssd 19.8k iops

IO depth of 16: bcache 16.7k iops, raw ssd 23.5k iops

IO depth of 8: bcache 8.7k iops, raw ssd 14.9k iops

IO depth of 4: bcache 8.9k iops, raw ssd 19.7k iops

SSD性能在不同IO深度時出現了波動。對于不同的寫模型會有不同的結果,我們只關注兩者的相對數值。
當測試隨機4K寫,IO深度為1時,bcache寫次數是裸SSD設備的兩倍:每一次寫都需要再更新一次索引。

隨機讀

IO depth of 64: bcache 29.5k iops, raw ssd 25.4k iops

IO depth of 16: bcache 28.2k iops, raw ssd 27.6k iops

bcache略勝一籌,可能跟要讀的數據相關。這里的結論是隨機讀時bcache與裸SSD讀性能是相同的。這里要注意的是,讀4K隨機寫下去的數據,這樣的測試模型對于bcache是不好的。這意味btree都是4K大小,btree將比通常時候大得多。在實際應用中,平均大小是100K。btree變大就意味著索引占用更大的內存空間,并且有一部分是在二級索引。根據個人經驗這些開銷在大型機器IOPS超過500K時才會有實際影響。如果大家有其他的測試方法或者我的測試方法中有什么問題請通知郵件告訴我。
常見問題關機、設備移除系統關機時cache仍然是臟的,就是說后端磁盤的數據并不可靠。如果要保證后端磁盤數據是安全的,就需要手動移動cache或者將cache設置為writethrough模式。
自動掛載bcache會自動匹配cache和后端設備。匹配過程與設備對系統可用的次序沒有關系。帶bcache的根目錄分區為了讓根分區能夠使用bcache,需要添加rootdelay=3到啟動參數,這樣才能讓udev規則在系統mount根文件系統之前運行。已格式化過的磁盤或分區如果一個分區或者磁盤設備啟動時沒有創建bcache,可能是因為超級塊發生錯誤。為了讓bcache能夠正確檢測到之前的設備,udev規則會首先檢查是否符合bcache規則和blkid檢查。udev規則檢查設備超級塊從而識別文件系統類型,如果該超級塊不符合bcache文件系統類型那么就不會添加bcache。
# cat /usr/lib/udev/rules.d/61-bcache.rules....# Backing devices: scan, symlink, registerIMPORT{program}="/sbin/blkid -o udev $tempnode"# blkid and probe-bcache can disagree, in which case don't registerENV{ID_FS_TYPE}=="?*", ENV{ID_FS_TYPE}!="bcache", GOTO="bcache_backing_end"...# lsblk -o NAME,MAJ:MIN,RM,SIZE,TYPE,FSTYPE,MOUNTPOINT,UUID,PARTUUIDNAME??????? MAJ:MIN RM?? SIZE TYPE FSTYPE MOUNTPOINT UUID???????????????????????????????? PARTUUIDsda?????????? 8:0??? 0 111.8G disk├─sda1??????? 8:1??? 0???? 3G part vfat?? /esp?????? 7E67-C0BB??????????????????????????? d39828e8-4880-4c85-9ec0-4255777aa35b└─sda2??????? 8:2??? 0 108.8G part ext2????????????? 93d22899-cd86-4815-b6d0-d72006201e75 baf812f4-9b80-42c4-b7ac-5ed0ed19be65sdb?????????? 8:16?? 0 931.5G disk└─sdb1??????? 8:17?? 0 931.5G part ntfs????????????? FAD2B75FD2B71EB7???????????????????? 90c80e9d-f31a-41b4-9d4d-9b02029402b2sdc?????????? 8:32?? 0?? 2.7T disk bcache??????????? 4bd63488-e1d7-4858-8c70-a35a5ba2c452└─bcache1?? 254:1??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1sdd?????????? 8:48?? 0?? 2.7T disk bcache??????????? ce6de517-7538-45d6-b8c4-8546f13f76c1└─bcache0?? 254:0??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1sde?????????? 8:64?? 1? 14.9G disk└─sde1??????? 8:65?? 1? 14.9G part ext4?? /????????? d07321b2-b67d-4daf-8022-f3307b605430 5d0a4d76-115f-4081-91ed-fb09aa2318d
在上面的例子中有一個分區之前是ext2文件系統。bcache將通過以下指令自動構建:# make-bcache -B /dev/sdc /dev/sdd -C /dev/sda2
因為設備/dev/sdc和/dev/sdd標識了bcache文件系統,因此會在系統啟動時自動添加,而/dev/sda2則需要手動添加。在/dev/sda2偏移1024處仍殘留有之前文件系統的超級塊信息,而bcache信息是從4096偏移開始記錄,修復的方法是:# dd if=/dev/zero count=1 bs=1024 seek=1 of=/dev/sda2
在系統重啟之后所有磁盤被正確識別:# lsblk -o NAME,MAJ:MIN,RM,SIZE,TYPE,FSTYPE,MOUNTPOINT,UUID,PARTUUIDNAME??????? MAJ:MIN RM?? SIZE TYPE FSTYPE MOUNTPOINT UUID???????????????????????????????? PARTUUIDsda?????????? 8:0??? 0 111.8G disk├─sda1??????? 8:1??? 0???? 3G part vfat?? /esp?????? 7E67-C0BB??????????????????????????? d39828e8-4880-4c85-9ec0-4255777aa35b└─sda2??????? 8:2??? 0 108.8G part bcache??????????? 93d22899-cd86-4815-b6d0-d72006201e75 baf812f4-9b80-42c4-b7ac-5ed0ed19be65? ├─bcache0 254:0??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1? └─bcache1 254:1??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1sdb?????????? 8:16?? 0 931.5G disk└─sdb1??????? 8:17?? 0 931.5G part ntfs????????????? FAD2B75FD2B71EB7???????????????????? 90c80e9d-f31a-41b4-9d4d-9b02029402b2sdc?????????? 8:32?? 0?? 2.7T disk bcache??????????? 4bd63488-e1d7-4858-8c70-a35a5ba2c452└─bcache1?? 254:1??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1sdd?????????? 8:48?? 0?? 2.7T disk bcache??????????? ce6de517-7538-45d6-b8c4-8546f13f76c1└─bcache0?? 254:0??? 0?? 2.7T disk btrfs???????????? 2ff19aaf-852e-4c58-9eee-3daecbc6a5a1sde?????????? 8:64?? 1? 14.9G disk└─sde1??????? 8:65?? 1? 14.9G part ext4?? /????????? d07321b2-b67d-4daf-8022-f3307b605430 5d0a4d76-115f-4081-91ed-fb09aa2318dd
同樣地,殘留超級塊還會引起類似的其他錯誤。
英文地址:http://bcache.evilpiepirate.org/

文章來源:http://blog.csdn.net/liumangxiong/article/details/17839797





Linux內核之bcache簡介



bcache是按照SSD特性來設計的,只按擦除桶大小進行分配,使用btree和日志混合方法來跟蹤緩存數據,緩存數據可以是桶上的任意一個扇區。bcache最大程度上減少了隨機寫的代價,它按順序填充一個桶,重新使用時只需將桶設置為無效。bcache支持寫直達和回寫策略。回寫默認情況下是關閉的,可以在運行時改變。bcache還在最大程度上保護你的數據,在系統異常關機時數據仍然是可靠的。因為它被設計為只有在數據完全寫回存儲設備才確認寫成功。回寫策略能夠緩存絕大多數的寫請求,然后再按照索引將臟數據按次序寫回到后端存儲設備。SSD的特點就是隨機IO速度很快,而對于大塊順序IO的提升卻并不大。bcache會檢測順序IO并忽略;還會對每一個任務記錄動態的平均IO大小,當平均IO大小超過截止值時該任務后面的IO將會被忽略,這樣就可以透傳備份或者大文件拷貝。在flash上發現數據IO錯誤時,首先會嘗試讀以恢復數據或者將該緩存項置為無效。對于不可恢復的錯誤,例如元數據或臟數據,bcache將會自動關閉緩存。如果有臟數據在緩存中,這時會首先關閉回寫策略然后再等待臟數據刷回。從這里開始首先需要安裝bcache-tools,它提供了make-bcache工具。緩存設備和后端磁盤在使用前都需要先初始化:[html]?view plaincopy
  • make-bcache?-B?/dev/sdb??
  • make-bcache?-C?/dev/sdc??

  • make-bcache提供了同時初始化多個設備的功能,并自動綁定緩存設備和后端磁盤:[html]?view plaincopy
  • make-bcache?-B?/dev/sda?/dev/sdb?-C?/dev/sdc??

  • bcache-tools現在已經包含了udev規則文件,bcache設備可以立即被內核感知。如果沒有udev規則,需要手動注冊設備:[html]?view plaincopy
  • echo?/dev/sdb?>?/sys/fs/bcache/register??
  • echo?/dev/sdc?>?/sys/fs/bcache/register??

  • 注冊了后端磁盤后,bcache設備會出現在/dev/目錄下,現在就可以格式化然后使用了。bcache設備默認是透傳模式,因此需要綁定緩存。bcache顯示如下:[html]?view plaincopy
  • /dev/bcache<N>??

  • 還有(有udev規則文件時):[html]?view plaincopy
  • /dev/bcache/by-uuid/<uuid>??
  • /dev/bcache/by-label/<label>??

  • 如果要開始使用:[html]?view plaincopy
  • mkfs.ext4?/dev/bcache0??
  • mount?/dev/bcache0?/mnt??

  • bcache的sysfs控制項在/sys/block/bcache<N>/bcache。bcache設備是按集合來管理的,但目前一個集合只支持一個bcache設備,將來會支持多個設備、元數據和臟數據鏡像。新cache設備顯示為/sys/fs/bcache/<UUID>
    cache綁定:在緩存設備和后端設備都注冊之后,還要將緩存設備綁定到后端設備從而使用緩存。綁定操作如下:echo <CSET-UUID> ?> /sys/block/bcache0/bcache/attach這個操作只需要做一次就可以了。下一次系統重啟時,只需要重新注冊所有bcache設備。如果后端設備還有未定回的緩存數據,那么就不會創建/dev/bcache<N>,直到緩存設備回來,尤其在寫回策略時特別重要。如果需要在沒有緩存設備的時候強制使用設備:[html]?view plaincopy
  • echo?1?>?/sys/block/sdb/bcache/running??

  • 注意這里參數是后端設備,而不是bcache設備,何況此時bcache設備還沒有創建。如果是使用分區創建的bcache設備,例如sdb2對應的目錄是/sys/block/sdb/sdb2/bcache。在強制使用bcache設備后,緩存設備添加到系統,這個緩存設備的所有緩存數據將會設置為無效。緩存設備的臟數據是不會繼續,因為這些臟數據將有可能使現在文件系統崩潰。
    錯誤處理bcache嘗試處理IO錯誤而不影響正常操作,但如果錯誤數超過閥值(默認是0,可配置)會關閉緩存并切換到透傳模式。-如果是讀錯誤則嘗試直接從后端設備讀-如果是寫直達寫錯誤,將緩存對應數據塊設置為無效-去綁定時,刷回臟數據。臟數據寫回失敗目前是沒有處理的。
    性能相關問題bcache有很多配置選項和可調參數。默認值適合于典型配置,如果想要更好性能則需要調整相關參數。-寫性能差如果寫性能不理想,那么建議調到寫回策略[html]?view plaincopy
  • #echo?writeback?>?/sys/block/bcache0/cache_mode??

  • -性能差,或者流量并沒有緩存到SSD默認情況下,bcache不會緩存順序IO和大文件。打開順序IO緩存:[html]?view plaincopy
  • #echo?0?>?/sys/block/bcache0/bcache/sequential_cutoff??

  • 設置回默認值:[html]?view plaincopy
  • #echo?4M?>?/sys/block/bcache0/bcache/sequential_cutoff??

  • -流量小,緩存不命中現實生活中,并不是所有SSD都能提供足夠快的速度作為磁盤的緩存,特別一個SSD作為多塊磁盤的緩存,或者順序IO時。所以需要避免SSD成為系統瓶頸。為了避免bcache設備因為SSD變慢,當延遲超過閥值時逐漸減少流量。需要關閉擁塞控制項:[html]?view plaincopy
  • #echo?0?>?/sys/fs/bcache/<cache?set>/congested_read_threshold_us??
  • #echo?0?>?/sys/fs/bcache/<cache?set>/congested_write_threshold_us??

  • 對于讀,默認值是2000us(2ms),對于寫是20000.
    SYSFS - 后端設備/sys/block/<bdev>/bcache, /sys/block/bcache*/bcache, /sys/fs/bcache/<cset-uuid>/bdev*
    SYSFS - 緩存集合/sys/fs/bcache/<cset-uuid>
    SYSFS - 緩存設備/sys/block/<cdev>/bcache
    英文:Documentation/bcache.txt

    文章來源:http://blog.csdn.net/liumangxiong/article/details/18090043





    使用 LVM (基于dm-cache) 新的緩存特性


    如果你有一臺帶有慢速硬盤和快速SSD的電腦,你想使用SSD作為快速持久緩存用來提升訪問硬盤的速度。然而直到最近,你有三個選擇:bcache和dm-cache都upstream,或者Flashcache/EnhanceIO。Flashcache不是upstream。dm-cache要求你首先坐下來,使用計算器計算塊的偏移。bcache是三個選擇中最全面的。

    但是最近LVM已經增減了緩存的支持(構建在dm-cache之上),因此在理論上,你能讓已存在的邏輯卷轉換到已緩存的設備。



    安裝

    為了在實踐中了解是怎樣工作的,我在以前的無盤虛擬群集中添加了3塊硬盤。

    在鏡像配置中有兩個2TB的WD硬盤。通過藍色(冷)線連接。在左側是三星EVO 250GB SSD,作為緩存的紅色(熱)盤。

    另一個新聞:哦,現在品牌制造商的SSD是真的便宜!

    lsblk輸出如下,sda和sdb是WD硬盤,sdc是三星SSD:

    ?
    123456789#?lsblkNAME?????????????????????????????????????MAJ:MIN?RM???SIZE?RO?TYPE??MOUNTPOINTsda????????????????????????????????????????8:0????0???1.8T??0?disk??└─sda1?????????????????????????????????????8:1????0???1.8T??0?part??

    總結

    以上是生活随笔為你收集整理的转 Linux块设备加速缓存bcache和dm-cache 使用SSD来加速服务器的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

    中日韩男男gay无套 日韩精品一区二区三区高清免费 | 黄色网www | 久久这里 | 久久精品香蕉视频 | 热久久影视 | 中文字幕有码在线播放 | 精品久久91 | 伊人www22综合色 | 天天干.com | 久久久 激情 | 久久精品视频99 | 精品国产成人av | 最近中文字幕大全 | 欧亚日韩精品一区二区在线 | 在线免费观看涩涩 | 国产精品免费小视频 | 国产一区二区三区高清播放 | 色婷婷影视 | 国内精品久久久久久久久久久 | 日韩在线免费 | 成人小视频在线免费观看 | 亚洲一区二区三区精品在线观看 | 国产高清精 | 国产小视频免费观看 | 国产美女精品 | 国产精品嫩草55av | av网站地址 | 麻豆免费视频观看 | 日日干视频 | 色网免费观看 | 天天操操操操操操 | 日韩中字在线 | 婷婷在线资源 | www国产在线| 久久激五月天综合精品 | 91精品欧美 | 丁香婷婷色 | 国产成人久久久77777 | 成人综合婷婷国产精品久久免费 | 婷婷激情五月 | 中文字幕日韩伦理 | 亚洲精品中文字幕在线 | 激情婷婷在线观看 | 天天干天天爽 | 亚洲欧美怡红院 | 丁香六月色 | 久久久久久久久福利 | 精产嫩模国品一二三区 | 91麻豆精品国产91久久久久久久久 | 久久99精品国产99久久6尤 | 国产精品一区二区av麻豆 | 亚洲人成人在线 | 97久久精品午夜一区二区 | 亚洲狠狠操 | 一本一本久久aa综合精品 | 国产一区二区三区在线免费观看 | va视频在线观看 | 中文字幕免费一区二区 | 成年人av在线播放 | 亚洲久在线| 欧美片一区二区三区 | 国产精品久久久久久久电影 | 国产午夜精品一区二区三区 | 欧美日韩成人一区 | 毛片网站免费在线观看 | 天天操夜夜爱 | 九九久久影视 | 国产一区二区三区四区在线 | 毛片精品免费在线观看 | 久久香蕉国产精品麻豆粉嫩av | 国产婷婷视频在线 | 亚洲精品国产欧美在线观看 | 九色精品免费永久在线 | 综合网天天射 | 91精品视频在线免费观看 | 99久久综合精品五月天 | 欧美一区二区在线 | 国产精品一区二区果冻传媒 | 中文字幕a在线 | 99草视频| 亚洲国产欧洲综合997久久, | 久久久免费在线观看 | www.狠狠色 | 国产精品亚洲片在线播放 | 碰碰影院 | 久久99久久精品 | 黄色一区二区在线观看 | 美女网站视频免费黄 | 黄网站www| av软件在线观看 | 欧美人zozo| 好看av在线 | 日韩资源在线 | 麻豆94tv免费版| 日韩视频在线一区 | 亚洲电影院 | 亚洲欧美激情精品一区二区 | 在线黄网站 | 热久久影视 | 狠狠干网址 | 三级视频国产 | 久久视频6 | 国产高清视频在线 | 一区二区中文字幕在线播放 | 黄色国产大片 | 在线小视频你懂的 | 成人国产精品电影 | 色婷婷亚洲综合 | 高清av中文在线字幕观看1 | 成人久久久电影 | 99热精品在线 | 日日夜夜综合网 | 国产高清视频在线播放 | 午夜国产影院 | 亚洲国产色一区 | 久久久久久久久国产 | 黄色91在线观看 | 成人国产精品av | 色综合咪咪久久网 | 久久精品区 | 综合婷婷丁香 | 中文字幕在线观看1 | 欧美巨大荫蒂茸毛毛人妖 | 欧美在线一 | 久久精品婷婷 | 麻豆传媒视频在线 | 久久污视频 | 欧洲精品在线视频 | 欧美巨乳波霸 | 久久精品国产亚洲a | 亚洲视频免费在线看 | 91精品国自产在线偷拍蜜桃 | 成人精品亚洲 | 日韩精品一区二区三区电影 | 一区二区精品国产 | 中文字幕国产精品一区二区 | 在线欧美a| 91av视频在线播放 | 久久午夜色播影院免费高清 | 成人啪啪18免费游戏链接 | 香蕉97视频观看在线观看 | 亚洲精品午夜视频 | 欧美日韩在线观看不卡 | 亚色视频在线观看 | 日韩av一区二区在线 | 一区二区中文字幕在线 | 国产精品对白一区二区三区 | 天天操夜夜操国产精品 | 免费99精品国产自在在线 | 国产91在线观看 | 亚洲一区二区视频在线 | 玖玖在线看 | 国产精品美女久久久久久久久 | 国产精品无av码在线观看 | 美女在线免费观看视频 | 亚洲综合视频在线观看 | 免费看色的网站 | 麻豆成人精品视频 | 日韩精品中文字幕av | 国产精品18毛片一区二区 | 亚洲精品www| 国产成人资源 | 91视频3p| 91豆麻精品91久久久久久 | 免费视频黄 | 黄色网址国产 | 国产专区精品 | 久久9视频 | 成人黄色一级视频 | 色多视频在线观看 | 日韩电影中文字幕在线观看 | 五月综合激情网 | 欧美色噜噜 | 人交video另类hd | 狠狠狠狠干 | 五月婷婷在线视频观看 | 久久精品黄 | 日日躁天天躁 | 国产亚洲精品久久久久秋 | 岛国大片免费视频 | 91夫妻视频 | 国产精品一区二区三区在线免费观看 | 欧美伦理电影一区二区 | 激情视频一区二区三区 | 天天综合网在线观看 | 国产精品va在线观看入 | 国产一卡在线 | 天天干天天干天天色 | 麻豆一二三精选视频 | 操处女逼| 日韩精品视频一二三 | 国产精品九九视频 | 日韩区欧美久久久无人区 | 91探花系列在线播放 | 五月天六月丁香 | 久久久美女 | 日韩免费电影一区二区 | 一二区精品 | 激情开心网站 | 日精品| 免费三级骚 | 中文字幕国产亚洲 | 亚洲精品国精品久久99热一 | 992tv在线| 丁香婷婷久久久综合精品国产 | 国产精品亚洲综合久久 | 91av成人| 人人揉人人揉人人揉人人揉97 | 亚洲欧美日韩一区二区三区在线观看 | 亚洲国产黄色 | 日韩av福利在线 | 999成人国产 | 久久免费视频这里只有精品 | 国产婷婷在线观看 | 国产免费小视频 | 亚洲乱亚洲乱亚洲 | 亚洲国产美女精品久久久久∴ | 麻豆综合网 | 中文字幕av在线不卡 | 久久免费视频观看 | 色婷婷久久久 | 九九在线国产视频 | 日韩三级在线 | 黄色大片免费网站 | 91久久国产综合精品女同国语 | 免费看污在线观看 | 国产精品中文久久久久久久 | 日韩高清久久 | 黄色福利网 | 中字幕视频在线永久在线观看免费 | 天天射综合网站 | 久久调教视频 | a级一a一级在线观看 | 久久人人添人人爽添人人88v | 伊人成人激情 | 少妇av网| 网站在线观看你们懂的 | 国产成人一区二区精品非洲 | 日韩av电影中文字幕在线观看 | 亚洲免费专区 | 国产精品久久久久久久久久久不卡 | 久久久免费毛片 | 视频国产在线 | 日韩一区二区三区高清在线观看 | 成 人 黄 色 免费播放 | 欧美日韩精品在线视频 | av噜噜噜在线播放 | 在线观看91久久久久久 | 国产香蕉av | 亚洲三级黄色 | 99在线热播精品免费 | 日韩成人精品在线观看 | 欧洲精品亚洲精品 | 久久精品国产一区二区三区 | 中国一级片在线观看 | 婷婷色av | 黄网站色成年免费观看 | 亚洲精品在线一区二区 | 天天做天天爱夜夜爽 | 日韩精选在线 | 中文视频一区二区 | 久久免费视频8 | 高清在线观看av | 国产精品久久久久免费 | 国产天天综合 | 天天搞夜夜骑 | 亚洲成人av在线电影 | 国产黑丝一区二区 | 中文字幕中文字幕在线中文字幕三区 | 日韩免费一二三区 | 国产一级一片免费播放放a 一区二区三区国产欧美 | 日韩高清一 | 日韩精品免费在线播放 | 亚洲激精日韩激精欧美精品 | 九九九九热精品免费视频点播观看 | 亚洲一区二区精品 | 在线视频一区观看 | 亚洲精品中文字幕视频 | 在线视频 精品 | 日韩中文三级 | 久久深夜福利免费观看 | 久久久国产精品成人免费 | 国产看片网站 | 久久av网址 | 欧美在线视频二区 | 91麻豆视频网站 | 精品国产aⅴ麻豆 | 久久视频中文字幕 | 一二三四精品 | 成人a级网站 | 国产美女久久久 | 中国老女人日b | 免费成人在线视频网站 | 四季av综合网站 | 久久久99精品免费观看app | 精品久久久久久亚洲综合网 | 精品国产一二三四区 | 精品久久1 | 欧美成人xxxxxxxx | 亚洲精品国产精品国自 | 天天综合日日夜夜 | 九九免费在线观看视频 | 亚洲永久字幕 | 狠狠综合久久av | 久久久久电影 | 久久美女免费视频 | 国产精品资源在线 | 蜜臀aⅴ精品一区二区三区 久久视屏网 | 亚洲在线视频免费 | 在线观看一区 | 免费黄色网址网站 | 日韩精品视频免费看 | 久久视频在线视频 | 一区 在线 影院 | 久久国产香蕉视频 | 国产a国产a国产a | 久久99国产精品自在自在app | 免费视频久久 | 超碰在线观看av | 久久免费精彩视频 | 日韩视频图片 | 日韩成人在线一区二区 | 激情开心站 | 97超碰资源总站 | 日韩视频免费在线观看 | 在线观看视频免费播放 | 久久精品婷婷 | 成人久久18免费网站 | 国产91成人在在线播放 | 色网av| 99精品国产99久久久久久福利 | 亚洲欧美婷婷六月色综合 | 91精品小视频 | 婷婷色综合色 | 91精品在线视频观看 | 中文字幕久久精品 | 不卡av电影在线 | 国产在线91在线电影 | 欧美日韩久久久 | 日韩三级免费 | 国产专区一 | 91网站免费观看 | 成年人三级网站 | 国产精品理论片在线播放 | 97色狠狠 | 91精品入口 | 一级免费av | 免费看黄的视频 | 久久久久久久久久久久久国产精品 | 国产高清一区二区 | 亚洲视频网站在线观看 | 欧美地下肉体性派对 | 亚洲成人网av | 九九精品无码 | 波多野结衣电影一区 | 极品美女被弄高潮视频网站 | av888av.com| 亚洲精品www久久久久久 | 欧美精品久久天天躁 | 在线免费av网 | 久久久久国产成人精品亚洲午夜 | 欧美精品一区在线 | 欧美a级片免费看 | 国产视频在 | 99精品欧美一区二区三区 | 亚洲国产一区二区精品专区 | 欧美精品一区在线 | 丝袜美腿在线播放 | 久久精品国产成人精品 | 日本爱爱免费视频 | 国产性天天综合网 | 999久久a精品合区久久久 | 久久久国产毛片 | 美女搞黄国产视频网站 | 久久高清国产 | 亚洲精品www久久久 www国产精品com | 婷婷九月丁香 | 免费在线a | 国产精品普通话 | 91福利免费| 国产99久久九九精品 | 欧美孕交vivoestv另类 | 丰满少妇高潮在线观看 | 亚洲成人动漫在线观看 | 欧美日韩精品电影 | 在线中文视频 | 午夜国产福利视频 | 粉嫩av一区二区三区四区五区 | 狠狠色丁香婷综合久久 | 免费看三级黄色片 | 99热999| 中文字幕在线视频精品 | 菠萝菠萝蜜在线播放 | 久久不卡免费视频 | 激情婷婷欧美 | 国产精品免费在线 | av 在线观看 | 娇妻呻吟一区二区三区 | 中文字幕在线影视资源 | 久久高清国产 | 国产高清无线码2021 | 97视频在线观看网址 | 9在线观看免费高清完整版在线观看明 | 亚洲精品视频在线 | 91看国产| 国产不卡一二三区 | 欧美色婷 | 96av视频 | 亚洲影视九九影院在线观看 | 四虎在线免费观看视频 | 又黄又刺激又爽的视频 | 粉嫩av一区二区三区四区在线观看 | 色婷婷成人网 | 免费在线激情电影 | 在线观看免费一级片 | 精品一区二三区 | 啪啪免费观看网站 | 久久精品艹 | 久艹在线免费观看 | 成人a免费 | 96国产在线 | 精品视频在线播放 | 国产精品一区二区三区四区在线观看 | 久艹视频在线免费观看 | 97超碰人人模人人人爽人人爱 | 九九免费在线观看 | 久久国产麻豆 | .国产精品成人自产拍在线观看6 | 天堂资源在线观看视频 | 亚洲精品麻豆 | 中文字幕人成乱码在线观看 | 欧美激情精品 | 久久五月天婷婷 | 99精品视频在线看 | 中文字幕一区二区三区在线视频 | 天天干,天天干 | 懂色av懂色av粉嫩av分享吧 | 国产日韩在线一区 | 欧美亚洲精品在线观看 | 国产精品综合久久久久久 | 免费在线精品视频 | 欧美一区二区三区四区夜夜大片 | 色婷婷电影| 精品国产99国产精品 | 精品国产视频在线观看 | 欧美永久视频 | 精品久久久久久久久久久久久久久久久久 | 丝袜美腿在线视频 | 在线视频 91| 亚洲综合黄色 | 国产精品黄网站在线观看 | 中文字幕在线免费观看视频 | 91爱爱网址 | av在线播放网址 | 久久国产经典 | 日韩av五月天 | 色丁香久久 | 伊人六月 | 中文字幕丰满人伦在线 | 国产在线综合视频 | 日韩一区精品 | 91av久久 | 精品久久久久久久久久久久 | 狠狠亚洲 | 免费一级片在线观看 | www.av小说| 国产精品99久久久久久人免费 | 欧美成人亚洲成人 | 欧美一级黄色网 | 日本电影久久 | 日本中文在线观看 | 五月天婷婷免费视频 | 国产精品久久久视频 | 黄色一级在线免费观看 | 亚洲精品视频在线播放 | 精品99久久久久久 | 在线亚洲欧美视频 | 久久久在线视频 | 综合在线亚洲 | 婷婷综合电影 | 国产亚洲精品久久久久久久久久久久 | 亚洲精品乱码久久久久久 | 国产999视频在线观看 | 成人av在线一区二区 | 免费黄色av| 国产97在线看 | 日韩不卡高清视频 | 国产精品美女在线 | 午夜精品一区二区三区免费视频 | 国产五月 | 97干com| 色哟哟国产精品 | 国产一区二区不卡在线 | 国产一区二区精 | 午夜 久久 tv | 国产色综合 | 91九色蝌蚪视频在线 | 超级av在线 | 国产日本在线 | 搡bbbb搡bbb视频 | 蜜臀av免费一区二区三区 | 国产一区 在线播放 | 中文不卡视频 | 天天色欧美 | 亚洲综合成人专区片 | 色婷婷久久久 | 国产精品欧美在线 | 午夜精品福利在线 | 在线精品视频免费观看 | 日韩理论片中文字幕 | 国产精品色婷婷视频 | 超碰97人人射妻 | 欧美激情精品久久久久久免费 | 成人av在线网| 国产欧美综合视频 | 久久久久国产a免费观看rela | 日韩中文字幕在线看 | 久久久久免费精品 | 婷婷视频在线 | 91av福利视频 | 午夜婷婷网 | 人人揉人人揉人人揉人人揉97 | 成年人在线观看视频免费 | 免费观看一区二区三区视频 | 国产精品久久久久久久久搜平片 | 国产在线观看你懂得 | 91成人精品一区在线播放69 | 成人97视频一区二区 | 亚洲视频axxx | 欧美日韩中文字幕综合视频 | 国产视频一区在线免费观看 | 在线免费视频a | 麻豆久久一区二区 | 亚洲欧洲国产视频 | 国产精品久久一区二区三区不卡 | 亚洲成 人精品 | 伊人婷婷 | 伊人久久影视 | 午夜精品一区二区三区在线视频 | av资源中文字幕 | 亚洲成人av影片 | 中文字幕 国产视频 | 免费在线91| 日韩中文字幕免费视频 | 亚洲五月| 81精品国产乱码久久久久久 | 99久久久国产精品免费99 | 久久综合给合久久狠狠色 | av+在线播放在线播放 | 久久免费成人精品视频 | 欧美 日韩 性| 国产精品一区二区在线观看 | 国产成人免费精品 | 天天操天天操天天操天天操天天操天天操 | 久久久久女教师免费一区 | 美女视频黄在线观看 | 亚洲一级免费电影 | 91av中文字幕| 九九久久影院 | 在线看v片成人 | 国产精品私人影院 | 中文字幕乱码在线播放 | 精品国产伦一区二区三区观看体验 | 99亚洲国产 | 亚洲福利精品 | 亚洲少妇自拍 | 久久精品成人 | 久久婷婷一区二区三区 | www五月天 | 国产无套精品久久久久久 | 日韩一区在线免费观看 | 色资源二区在线视频 | 在线播放你懂 | 国产美女免费视频 | 天天干天天做 | 亚洲伊人天堂 | 91久久精品一区二区三区 | 免费a视频在线观看 | 91av在线看 | 999久久国精品免费观看网站 | 在线观看日本高清mv视频 | 亚洲天堂网视频 | 日韩成人邪恶影片 | 黄色成人在线观看 | 在线免费观看国产视频 | 日韩av不卡在线播放 | 在线观看视频一区二区 | 国产精品麻豆欧美日韩ww | 亚洲精品乱码久久久久久按摩 | 欧美国产日韩在线视频 | 中文字幕一区二区三区乱码在线 | 亚洲激情五月 | 人成在线免费视频 | 欧美一级黄色片 | 国产91aaa | 精品av在线播放 | 美女视频黄在线 | 国产成人精品免高潮在线观看 | 国产日韩精品一区二区 | 999电影免费在线观看 | 久久夜靖品 | 99热9| 91看片淫黄大片在线播放 | 精品久久久久久亚洲 | 最近中文字幕完整高清 | 色婷婷电影 | 亚洲成人免费观看 | 激情五月播播久久久精品 | 国产玖玖在线 | 国产五十路毛片 | 国产成人精品在线 | 91爱爱网址| 青青草国产精品 | av福利网址导航 | 日韩激情久久 | 国产一区二区三区在线免费观看 | 久久久91精品国产 | 狠狠狠色丁香婷婷综合久久五月 | 中文字幕在线成人 | 久久久久99精品成人片三人毛片 | 天天操天天干天天插 | 国产视频在线观看免费 | 国产视频精品网 | 一区二区三区免费在线 | av观看免费在线 | 91免费的视频在线播放 | 九九热精 | 三上悠亚一区二区在线观看 | 国产精品久久久久久久免费 | 激情五月看片 | 最近在线中文字幕 | 国产精品麻豆果冻传媒在线播放 | 久久久久免费精品国产 | 亚洲成熟女人毛片在线 | 亚洲欧美视频在线 | 久久高清毛片 | 国产三级午夜理伦三级 | 午夜精品一区二区三区在线 | 成人一级片在线观看 | 六月丁香色婷婷 | 91影视成人 | 毛片在线播放网址 | 成年人免费在线观看网站 | 久草在线视频看看 | 中文字幕丝袜美腿 | 日韩免费观看视频 | av官网在线| 波多野结衣一区二区三区中文字幕 | 欧美激情va永久在线播放 | 日韩在线视频一区 | 91女子私密保健养生少妇 | 亚洲精品五月 | 韩国av免费观看 | 国产麻豆精品在线观看 | 欧美巨大荫蒂茸毛毛人妖 | av高清影院 | 草久在线视频 | 日韩有码中文字幕在线 | 一级性av | 乱子伦av | 日本中文字幕网址 | 麻豆精品传媒视频 | 久久人人爽爽人人爽人人片av | 欧美 日韩 性| 91色吧| 97超碰在线人人 | 国产视频在线观看一区二区 | 日韩av成人在线观看 | 亚洲久草网| 免费下载高清毛片 | 免费在线观看91 | 久草在线观 | 中文字幕中文字幕 | 久草视频中文在线 | 欧美黄在线 | 综合激情 | 91麻豆免费版 | 最近中文字幕第一页 | 精品视频资源站 | 久久刺激视频 | 韩国精品在线观看 | 美国av片在线观看 | 国产成人一区二区三区在线观看 | 欧美激情精品久久久 | 成人免费在线观看av | 香蕉成人在线视频 | 成人一区二区三区在线观看 | 成人永久视频 | 99久久99久久综合 | 国产麻豆果冻传媒在线观看 | 伊人丁香 | 欧洲一区精品 | 久久久久久国产精品亚洲78 | 国产精品一区二区久久精品爱微奶 | 欧美日韩亚洲精品在线 | 欧美日韩不卡在线 | 97av在线视频免费播放 | 国产一区视频在线 | 一区二区三区国产精品 | 中文字幕av在线不卡 | 黄网站www | 91综合视频在线观看 | 国产精品高清av | 激情婷婷久久 | 99国产在线观看 | 中文字幕五区 | 国产福利91精品一区 | 午夜在线资源 | 九九影视理伦片 | 日日射av| 中文字幕色网站 | 精品国产资源 | 亚洲精品免费在线视频 | 国产精品久久久久久久久久ktv | 69av久久| 黄色官网在线观看 | 成人一级在线观看 | 99视频偷窥在线精品国自产拍 | 成人小视频在线播放 | 在线小视频国产 | 日本中文字幕网 | 视频成人永久免费视频 | 九九久久精品视频 | 国产手机视频在线 | 久久久久| 色香蕉在线 | 探花视频免费观看 | 97精产国品一二三产区在线 | 狠狠色丁香婷综合久久 | 久久久久久久电影 | 高清av影院| 一区二区三区国产欧美 | 亚洲午夜久久久久久久久电影网 | 国产精品一区二区 91 | 天天综合色网 | 国产在线观看h | 亚洲黄色免费电影 | 日韩成年视频 | 99久久日韩精品免费热麻豆美女 | 免费观看一区二区三区视频 | 国产亚洲综合精品 | 色视频网站在线观看一=区 a视频免费在线观看 | a v在线观看 | 中字幕视频在线永久在线观看免费 | 最新av观看 | 91大神精品视频在线观看 | 久草网站在线 | 色激情在线 | 免费精品视频在线 | 国产区在线视频 | 色噜噜噜噜 | 国产天天综合 | 日韩欧美精品一区二区三区经典 | 99视频精品全部免费 在线 | 欧美在线观看小视频 | www.婷婷com| 美女视频黄网站 | 中文字幕乱偷在线 | 日本三级久久久 | 中文字幕资源网 国产 | 毛片二区 | 狠狠色丁香婷婷综合久小说久 | 看v片 | 午夜精品久久久久久久久久久久 | 黄色免费在线视频 | av电影免费 | 天海翼一区二区三区免费 | 欧美特一级片 | 欧美成人精品三级在线观看播放 | 国产精品丝袜在线 | 欧美性网站| 少妇bbbb揉bbbb日本 | 99久久婷婷国产精品综合 | 久久伊人八月婷婷综合激情 | 国产男女爽爽爽免费视频 | 亚洲精品综合一区二区 | 欧美性春潮 | 中文字幕在线视频一区 | 精品乱码一区二区三四区 | 91精品视频免费 | 久草在线免费新视频 | 国产一区二区精品 | 久久久久国产精品一区二区 | 69国产在线观看 | 九九在线播放 | 九色琪琪久久综合网天天 | 日韩欧美视频一区二区三区 | 96亚洲精品久久久蜜桃 | 深夜免费网站 | 欧美日韩国产网站 | 在线免费观看国产黄色 | 免费成人黄色 | 在线日韩精品视频 | 欧美狠狠色 | 欧美美女视频在线观看 | 免费观看黄色12片一级视频 | 天天操天天射天天舔 | av电影免费在线看 | 99免费视频| 日韩中文字幕a | 午夜电影久久久 | 日韩精品一区二区三区电影 | av不卡在线看 | 色视频网站在线 | 波多野结衣久久精品 | 欧美成年性 | 天天干天天摸天天操 | 久久精品国亚洲 | 久久中文字幕在线视频 | 日韩精品免费专区 | 久久久精品网站 | 在线高清av | 97成人超碰| 亚州精品天堂中文字幕 | 日韩极品在线 | 五月综合婷| 久久成人午夜视频 | a爱爱视频 | 看全黄大色黄大片 | 欧美日在线观看 | 亚洲国产日韩一区 | 久久玖 | .国产精品成人自产拍在线观看6 | 在线黄色免费 | 97成人精品视频在线播放 | 91麻豆免费版 | 一本到视频在线观看 | 97在线观看免费高清完整版在线观看 | 久久精品www人人爽人人 | 激情婷婷六月 | 国产精品久久99 | 丁香六月伊人 | 五月激情丁香婷婷 | 免费视频一区 | 99热日本| 欧美在线你懂的 | 亚洲精品动漫在线 | 天天操天天射天天爽 | 日日干天天操 | 日日麻批40分钟视频免费观看 | 亚洲黄色精品 | 中文字幕黄色网址 | 久久精品2 | www天天干 | 日韩一区二区三区高清在线观看 | 久久久91精品国产一区二区三区 | 久久观看免费视频 | 中文字幕日韩高清 | 丁香花在线视频观看免费 | 丁香 婷婷 激情 | 偷拍福利视频一区二区三区 | 欧美一二三专区 | 亚洲日本在线一区 | 国际精品网 | 国产精品久久久久久爽爽爽 | 丁香五月网久久综合 | 91大神dom调教在线观看 | 美女国产免费 | 91视频在线观看下载 | 日韩高清一区 | 亚洲精品午夜aaa久久久 | 九九九在线观看 | 国产精品成人在线观看 | 91秒拍国产福利一区 | 成年美女黄网站色大片免费看 | 亚洲精品乱码久久久久v最新版 | 激情网在线观看 | 国产精品中文字幕在线 | 丁香六月婷婷开心婷婷网 | www.香蕉视频 | 欧美大片aaa | 精品久久久成人 | 国产一卡在线 | 美州a亚洲一视本频v色道 | 亚洲成av人片在线观看 | 久久亚洲欧美 | 欧美精品日韩 | 碰超在线观看 | 99在线热播精品免费99热 | 久久影院亚洲 | 久久久久久久网 | 在线欧美最极品的av | 日本色小说视频 | 中文在线8新资源库 | 国产成人一区二区三区影院在线 | 国产在线观看免费 | 久久午夜精品 | 久久理论片 | 日韩在线视频一区 | 日韩在线电影一区二区 | 亚洲aⅴ乱码精品成人区 | 91精品1区| 在线观看电影av | 伊人狠狠色| h网站免费在线观看 | 成人三级av | 婷婷色社区 | 激情校园亚洲 | 亚洲日本成人网 | 国产精品毛片一区二区在线看 | 精品视频免费在线 | 欧美日韩免费观看一区二区三区 | 日韩最新av在线 | 91麻豆国产福利在线观看 | 免费v片| 午夜精品福利一区二区三区蜜桃 | 久久精品中文字幕少妇 | 丁香婷婷社区 | 九九九九九精品 | 91亚色在线观看 | 欧美日韩国产一区二区三区在线观看 | 色综合久久五月 | 久久综合偷偷噜噜噜色 | 91看片淫黄大片一级在线观看 | 国产精品久久久久久久久久久久午夜片 | 国产剧情av在线播放 | 人人狠狠 | 热re99久久精品国产99热 | 欧美一区免费在线观看 | 欧美日本不卡视频 | 国产日韩精品一区二区三区 | 精品亚洲在线 | 日韩网站在线免费观看 | 在线中文字母电影观看 | 精品久久久久久久久久国产 | а中文在线天堂 | 五月天网页 | 黄网站app在线观看免费视频 | 视频高清| 精品久久一区 | 精品不卡视频 | 日韩在线观看中文字幕 | 操操日| 99久久久久| 国产精品久久人 | 干亚洲少妇 | 99爱国产精品 | 精品视频国产一区 | 91香蕉视频污在线 | 99在线热播精品免费 | 夜夜夜草 | 国产精品高潮久久av | 欧美另类性| 日韩免费视频 | 免费三级在线 | 香蕉影视app | 久久久在线视频 | 97超碰国产在线 | 最近中文字幕视频网 | 久草在线播放视频 | 色天天 | 日本三级香港三级人妇99 | 国产美女视频免费 | 国产精品都在这里 | 国产二区电影 | 99久久精品国产观看 | 日韩激情第一页 | 又黄又爽的视频在线观看网站 | 午夜久久电影网 | www.国产视频 | 欧美日韩伦理一区 | freejavvideo日本免费 | 操夜夜操 | 四虎成人精品永久免费av | 丁香六月色 | 在线观看免费国产小视频 | 免费久久久 | 三级黄色欧美 | 久久久久免费视频 | 成人av在线一区二区 | 精品国产中文字幕 | 亚洲欧美国内爽妇网 | 开心激情五月网 | 久久色在线观看 | www色| 91高清免费观看 | av不卡免费在线观看 | 激情中文在线 | 在线看片日韩 | 国产福利一区二区三区在线观看 | 成人免费视频网站 | 午夜视频在线观看网站 | a视频免费看 | 免费又黄又爽视频 | 国产精品99久久久久久大便 | 久久综合色天天久久综合图片 | 日本公乱妇视频 | 久久综合免费视频 | 天天做天天爱天天综合网 | 81国产精品久久久久久久久久 | 欧美一级看片 | 91影视成人 | 蜜臀av.com| 射久久| 国产专区免费 | 中文字幕在线影院 | 中文字幕视频三区 | 97国产大学生情侣酒店的特点 |