日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > windows >内容正文

windows

京东订单系统高可用架构及演变过程

發布時間:2023/12/14 windows 38 豆豆
生活随笔 收集整理的這篇文章主要介紹了 京东订单系统高可用架构及演变过程 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

京東到家是達達集團旗下中國最大的本地即時零售平臺之一,目標就是實現一個小時配送到家的業務。一直到 2019 年京東到家覆蓋 700 個縣區市,合作門店近 10 萬家,服務數千萬消費者。隨著訂單量的增長、業務復雜度的提升,訂單系統也在不斷演變進化,從早期一個訂單業務模塊到現在分布式可擴展的高并發、高性能、高可用訂單系統。整個發展過程中,訂單系統經歷了幾個明顯的階段,通過不同的技術優化方案解決業務上遇到的問題。

下面我將為大家逐一介紹我們遇到了哪些問題及如何解決,主要分為以下三部分:

  • 京東到家系統架構

  • 訂單系統架構演進

  • 訂單系統穩定性保障實踐

1

?

? ?

京東到家系統架構

1.1

?

? ?

業務架構

首先來看以下這張流程圖,這個系統架構主要由幾個部分構成:用戶端分別是 C 端用戶和 B 端用戶。B 端用戶針對的是像沃爾瑪、永輝超市等的一些商家,商家生產需要用到我們的一些揀貨 APP 和揀貨助手,后面商家履約完成會用到配送端,配送端就是給騎手接單搶單,最后是結算部分,分別給騎手和商家結算。

?C 端針對的是用戶,用戶進來瀏覽、下單到支付,整個過程是用戶的操作行為。基于用戶的操作行為,我們有幾大模塊來支撐,首先是京東到家 APP 的后端業務支撐的基礎服務,另外就是營銷系統、業務系統等等。基于上面這些,我們需要有很多系統來支撐,比如運營支撐系統、管理后臺的支撐系統、對商家的履約支撐系統。這些業務系統的底層大概有三塊的持久化,分別是緩存(LocalCache、Redis 等)、DB(MySQL、MongoDB 等數據庫)、ES。這就是京東到家簡版的業務架構圖。

1.2

?

? ?

運營支撐業務架構

京東到家的運營支撐業務架構主要分為商家管理、CMS 管理、營銷管理、財務管理、運營數據這五大模塊,每塊包含的內容具體如下圖所示:

1.3

?

? ?

后端架構

接下來是我們 C 端 APP 的一些網關后端的接口及基礎服務的支撐。首先所有的請求都會經過網關協議,網關下面分為業務系統,包括首頁、門店頁、購物車、結算頁以及提單系統、支付系統和個人訂單系統,這些系統的支撐都離不開我們的基礎服務的支撐,比如庫存、商品、門店、價格等等,這些是一些重要的基礎服務支撐,來保證用戶可以流暢的下單以及到結算。

業務支撐包含了很多業務系統,比如用戶、定位、地址庫、運費、promise、推薦、搜索、收銀臺、風控等。

上面說到了營銷的一些管理系統,其實營銷還有一些后端的基礎服務系統,比如優惠券、滿減、秒殺、首單等。

1.4

?

? ?

訂單數據入庫流程

用戶提單以后數據怎么流轉?提單其實是一個把用戶下單數據存儲到數據庫,提單系統做了一些分庫分表。那么提完單的數據怎么下發到訂單系統生產?首先我們會有一個管道,提單通過一個分布式異步任務來下發訂單管道里。所有的訂單下來都會放到管道里,我們通過一個異步的任務,按照一定的速率,均勻地把訂單下發到訂單生產系統。這樣設計有一個好處,比如像大促時可能會有大量數據一下子下發到訂單生產系統,對訂單生產庫有很大壓力,所以我們中間設計出一個管道,通過異步任務來分發生產訂單。

看了圖可能有人會問為什么要有一個個人訂單 DB?其實個人訂單 DB 跟訂單系統是不同維度的數據,因為個人訂單其實是基于用戶去做了一個分庫分表,它每一個查詢的訂單都是基于這種個人,跟訂單生產是不一樣的,所以每個維度的數據都是單獨的存儲,來提高系統的穩定性,以及適合它自身業務特性的設計。

那么訂單系統跟個人中心是怎么交互的?首先異步,我們是通過 MQ 來交互這些訂單狀態的變更。另外 C 端的訂單取消,是怎么同步到訂單生產系統的?我們是通過 RPC 的調用來保證訂單實時取消,有一個返回結果。

2

?

? ?

訂單系統架構演進

2.1

?

? ?

訂單系統業務流程

我們的訂單履約分為兩大塊,商家生產和配送履約,具體步驟如下圖所示:

整個訂單履約的流程是怎么樣的?在用戶支付完成后,訂單會有一個補全的過程,補全完后,我們會根據一些門店的設置,把訂單下發到商家。下發商家后,有幾種對接模式:有開發能力的商家可以通過開放平臺,一些小商家可以通過商家中心以及我們的京明管家來完成訂單的生產履約。在商家拿到新訂單后,通過打印出小票進行揀貨。揀貨會分為幾個業務場景,因為有可能商家有貨也有可能沒貨,如果缺貨的話,我們有一個調整的功能,讓商家通過訂單調整來保證有商品的訂單可以繼續履約。

在商家完成揀貨時,我們訂單會分為分區揀貨、合單揀貨、前置倉揀貨這幾塊業務上的操作,其實在系統里我們有一個揀貨的池子,會通過不同維度的數據來完成高效的揀貨。揀貨完成后,我們的配送主要分為兩個模塊,一種是單個訂單的配送,另一種是集合單的配送。集合單就是把發單地址和配送地址在兩個相近的格子里的訂單合并起來,基本上都是基于將同一個門店的配送目的是同一個相近格子里的訂單,進行合單后讓一個騎士完成配送。配送會下發到一些配送系統,分為兩種模式,集合單和單個訂單的配送,以及和配送系統的整個運單交互的一個流程。

2.2

?

? ?

RPC 微服務化集群

說完業務后,接下來介紹一下我們應用的一些微服務的拆分過程。先講一下微服務理論方面的知識,比如為什么要拆分微服務?微服務拆分后可以解決哪些問題?這是接下來一個重點內容,大家可以思考一下,系統架構必須具備哪些條件才能達到高可用?

簡單總結來說,微服務可以降低系統的復雜度,可以獨立部署,并且有很好的擴展性:

  • 降低復雜度:把原來耦合在一起的業務,按領域拆分為不同的微服務,拆分原有的復雜邏輯,每個微服務專注于單一業務邏輯。明確定義領域職責與邊界;

  • 獨立部署:由于微服務具備獨立部署運行能力,當業務發生變更升級時,微服務可以單獨開發、測試、部署升級。提高了迭代效率,降低了研發風險;

  • 擴展性:拆分后的微服務架構獨立部署,可以根據流量預估或壓測評估獨立進行擴容升級。

我們訂單系統的架構演進如上圖所示,最左邊是最初的一個模型,所有的業務都耦合在一個應用里面,這個應用可能就有一個 service 來支撐,數據庫也是一個單點的數據庫。隨著這些年的迭代升級變更,逐步演進到一個應用有多個服務支撐,數據庫也在不斷升級變更,以及到后面把應用按微服務拆分成多個模塊,拆成多個領域的支撐,按不同的系統邊界去拆分。并且拆完后,隨著業務量越來越大,其實我們也在做一些升級,比如 Redis 的接入。

Redis 的接入解決了什么問題?數據庫為什么要分庫?ES 為什么在接下來一些系統架構升級里會被引入進來?為什么 DB 要拆成多個集群?這背后的一些根本問題,以及解決業務系統的一些背景,接下來我們逐一探討。

在最初搭建項目時,其實我們是要保證業務的快速試錯。這個模型會有什么問題?就是系統會有一些單點風險,以及系統發布是一個短暫停,所有請求都是一個主觀的操作,并發能力很差,稍微有一些業務量時,系統接口就會超時比較嚴重。這是最初 2015-2016 年的情況。

接下來 2016-2017 年,隨著業務的快速迭代,系統復雜度也慢慢高了起來,系統邏輯耦合會比較嚴重,改動一塊的邏輯影響就會比較大,導致線上問題頻發,因為所有的邏輯都耦合在一起,一次發布可能就會影響范圍比較大。

按微服務拆分成多個系統,如果發布有問題也只會影響其中的一些很小的部分。在后面隨著業務量越來越大,RPC 這種框架的引入,解決故障的自動下線,保證高可用,比如單臺服務器有問題時,能做到自動下線來保證不影響業務。

2.3

?

? ?

訂單系統架構升級 - Redis 集群

2017-2018 年,我們根據 2016 年遇到的問題做了一些拆分,比如按領域拆分不同的 APP 應用。這樣拆分做到的就是系統沒有單點,負載均衡可以橫向擴展,多點部署。包括引入 Redis,其實我們用到了 Redis 的分布式鎖、緩存、有序隊列、定時任務。

我們數據庫為什么升級?因為數據庫的數據量越來越大,比如添加一些字段,它其實會做一些鎖表操作,隨著數據量越大,單表的數據越來越多,數據主從延遲以及一些鎖表的時間會越來越長,所以在加字段的時候對生產影響特別大,我們就會對數據做一個分離,把一些冷的數據單獨做一個歷史庫,剩下的生產庫只留最近幾天的一些生產需要的數據,這樣生產庫的訂單數據量就會很小,每次修改表的時間是可控的,所以我們會把數據按照冷備進行拆分。

至于為什么引入 ES,是因為訂單在生產方面會有一些很復雜的查詢,復雜查詢對數據庫的性能影響非常大,引入 ES 就可以很好地解決這個問題。

2018-2019 年,我們發現之前在引入數據庫時,用數據冗余來保證一些數據應用可互備互降。比如我們之前在用 ES 低版本 1.7 的時候,其實就是一個單點,當集群有問題時是會影響生產的。我們后來引入了一個雙集群,雙 ES 集群互備,當一個集群有問題時,另一個集群可以直接頂上來,確保了應用的高可用和生產沒有問題。

另外,引入 Redis 雙集群,Redis 其實有一些大 key 的問題,當一些核心業務和非核心業務都用到 Redis 的時候,我們會把一些核心業務拆到一個集群,非核心業務拆到另一個集群,來保證 Redis 集群的穩定性,能穩定支撐訂單生產。

注:大 key(線上看到過 list 的 elements 超過百萬的)刪除時會阻塞比較長的時間,大 key 的危害:

OPS 低也會導致流量大,比如一次取走 100K 的數據,當 OPS 為 1000 時,就會產生 100M/s 的流量;

如果為 list,hash 等數據結構,大量的 elements 需要多次遍歷,多次系統調用拷貝數據消耗時間;

主動刪除、被動過期刪除、數據遷移等,由于處理這一個 key 時間長,而發生阻塞。

單個應用怎么保證高可用?其實我們這邊從最初的一個單機房單實例單 IP,一步步演進為單機房的單服務、單機房的多服務,最終是多機房的多服務,比如某個機房某些 IP 有問題,我們能確保應用可以正常請求響應,來保證系統的高可用。

2.4

?

? ?

訂單系統數據架構 - MySQL

下面來介紹一下我們主從架構的演進。最初我們就是一些主從的架構,并且主讀和寫都會請求到一個主庫,這樣就會給主庫帶來非常大的壓力。而像訂單生產這種天然性就是讀多寫少,主庫的壓力會比較大。所以基于這個問題,我們就做了數據庫架構的升級。

我們做了讀寫分離,就能很好地解決了這個問題。比如很多查詢,我們就會直接查詢到從庫的,主庫只是用來承載一些寫的流量,這樣主庫就減少了很多壓力。但這樣就會遇到上面說到的問題,因為我們是一個生產表和歷史表的結構,在每次加字段時,數據量很多的話,鎖表時間就會很長,導致在這種讀寫分離的架構下數據延遲就會比較大。

基于這種場景,我們又做了一些升級和改造。我們把數據拆出來了,拆成歷史庫,當所有的生產數據都很小的時候,對于提高性能是非常有幫助的。我們把生產完的一些數據全部都歸檔到歷史中,減輕主庫的整個壓力,以及在添加表字段修改的時候,其實就沒有太大影響了,基本上都很穩定。

數據的演進最終結構如上圖,當這是基于目前業務的一個支撐,在未來業務不斷發展的情況下,這個數據庫架構是原因不夠的。基于以上架構,我們主要是做到了一主多從的主備實時切換,同時確保主從在不同機房來保證數據庫的容災能力。同時通過業務隔離查詢不同的從庫給主庫減輕壓力,以及冷備數據的隔離的一個思路來保證訂單數據庫的穩定性。

2.5

?

? ?

訂單系統架構升級 - ES 集群

最開始我們是單 ES 集群,DB 會通過一個同步寫寫到 ES 集群。這個時候我們的 ES 是一個單機群,如果寫失敗的話,我們會起一個異步任務來保證數據的最終一致性,是這樣的一個架構。在 ES 集群沒問題的情況下,這個架構也是沒問題的,但當集群有問題時,其實就沒有可降級的了。

為了解決這個問題,我們引入了 ES 的冷備兩個集群,熱集群只保存跟數據庫一樣的生產庫的數據,比如說我們現在保證的就是 5 天的生產數據,其它所有數據都歸檔在一個 ES 的冷集群里。通過這種異步跟同步寫,通過異步任務來保證最終的集群的數據一致性。這就是 ES 的架構升級。

其實 ES 這樣寫的話會帶來一些很大的侵入,每次我們數據庫的一個變更都會帶來一些要 RPC 調用去同步 ES 的數據。這種瓶頸以及侵入式的問題怎么解決?我們接入了開源的 Canal,通過監聽數據庫變更了 binlog,來通過 Canal、kafka,然后異步通過消息來同步到 ES 集群。這個集群目前已經應用到線上的一些業務,經過灰度發布、后期驗證沒有問題后,會逐步接入生產系統。

如上圖所示,是我們整個訂單系統的結構。整個過程我們是通過業務網關、RPC 高可用、業務聚合、DB 冗余、多機房部署,來保證整個訂單應用的一些系統架構高可用。上述就是整體的訂單架構演進過程。

3

?

? ?

訂單系統穩定性保障實踐

大家思考一下,如果你要負責一些核心系統,你怎么保證穩定性?接下來我會從訂單系統可用性建設、系統容災能力、系統容量能力、系統預警能力分享一下我們在穩定性保障上的實踐。

3.1

?

? ?

訂單系統可用性建設

業務的快速發展對可用性保證要求越來越高,在方法論層面,我們按照系統故障的時間順序提出了事前、事中、事后三個階段,同時提出了四方面的能力建設——預防能力、診斷能力、解決能力、規避能力。

具體在工作上,我們會劃分為流程和系統建設兩個方面。其實最開始我們是為了完成工作,保證的是結果,最后發現每一個過程我們會把它平臺化,來提升人效。以上是一個大概的框架,下面我們一項一項詳細分析一下。

3.2

?

? ?

系統容災能力

容災能力這塊,我們從 ES 冷熱集群互備、Redis 緩存集群業務隔離,到業務接口的可降級和可異步,再到多維度的灰度發布。

就像上面提到的,我們對開放平臺、商家中心、京明管家等業務系統的支撐怎么做到互備?其實就是通過 ES 的冷熱集群,冷集群存全量的數據,熱集群存最近幾天的生產數據。而 Redis 是做業務隔離,Redis 存儲有一些大 key 會影響核心業務,我們就會把非核心的業務拆出來,拆到另外一個 Redis 集群。這就是我們系統的業務隔離和集群的互備。

業務接口可降級,其實是在一些復雜的業務操作接口里,我們可以通過一些異步處理,比如在訂單狀態變更的操作接口、除了更新 DB 和 ES、發送 MQ,訂單狀態的變更通過消息去同步發送。那么我們哪些可降低?比如說我們在業務核心操作接口里有一些 push 消息和發送短信,像這樣的非核心操作就可以用異步可降級的方案來解決。

灰度發布其實很重要,線上如果有一些新業務或系統的架構升級、技術的迭代,我們這邊都會通過灰度發布,比如可以通過一些門店先做門店匯總,如果單個門店沒問題,再通過一些商家,如果商家沒問題,就會灰度到整個城市,如果城市也沒問題,我們就會通過全量。

另一個維度來看,我們也會先灰度單臺機器,再到單機房、多機房。當然這個很局限,因為跟你灰度的一些功能有關系,大家要酌情根據自己的業務借鑒這種方案思路。

3.3

?

? ?

系統容量能力

至于系統容量的能力,主要分為評估和擴容兩個方面。容量評估可以借助一些輔助的工具,然后進行場景的壓測和全鏈路的壓測;而擴容方面,可以分階段依次實施冗余備份(主從分離)、垂直拆分(拆分核心屬性與非核心屬性)、自動歸檔。

3.4

?

? ?

系統預警能力

最后是預警能力,我們這邊用的是京東自研的 UMP 監控。

在接口層面,我們可以監控到:

  • 可用率;

  • 響應時間;

  • 調用量:當別人調用你的接口,你設置調用的一個量值,當超過閥值時就是進來了一些非正常的流量,當監控到這些異常流量,就可以做限流等相應操作;

  • 自定義:自定義一些報警;

  • 關鍵詞:當系統出現某種問題,需要關鍵字報出來然后進行人工介入;

  • 調用鏈:一個接口操作下來,誰調用了你?你調用了誰?哪個環節有問題?

在應用層面,我們可以監控到:

  • Young GC;

  • Full GC;

  • 堆內存;

  • 非堆內存;

  • CPU 使用率;

  • 線程數。

下面是關于 DB、ES、Redis 的集群監控,包括:

  • CPU 使用率;

  • 系統負載;

  • 內存;

  • 線程數;

  • 讀寫 IO;

  • 磁盤使用率;

  • TCP 連接數。

?

如果大家有排查過線上的問題,就應該能感受到比如像 IO 高、TCP 連接、重傳等,都會影響到線上一些核心接口的響應時間,包括你 CPU 高的時候,線程數是否飆高?系統負載是否飆高?當這些指標都發生異常變化時,對于接口的響應時間都會有很大影響。

另外,我們還要做一些積壓監控,比如一些異步任務正常來說一分鐘最多積壓 1000,就需要添加對應的監控,否則數據異常了都不知道;再比如訂單支付的狀態,當積壓到一定數量,可能是系統出了問題,就需要人工介入。

4

?

? ?

總結

一個企業的架構師團隊,需要長期關注技術驅動業務、明確領域職責與邊界等關鍵問題,同時架構的演進過程也是不斷考慮 ROI 的權衡取舍過程。技術的持續發展,有助于不斷提升用戶體驗、業務規模,降低運營成本,而架構在其中需要解決的問題就是化繁為簡,將復雜問題拆解為簡單的問題逐個攻破。隨著企業規模的持續增長、業務的持續創新,會給系統架構提出越來越高的要求,所以系統架構設計將是我們長期研究的課題。在這條架構演進之路上,希望能與大家共勉共進。

?

>>>>

Q&A

?

Q1:集群規模大概是什么樣的?各集群節點規模如何?

?

A:京東到家訂單中心ES 集群目前大約有將近30億文檔數,數據大小約1.3TB,集群結構是8個主分片,每個主分片有兩個副本,共24個分片。每個機器上分布1-2個分片,如果企業不差錢最好的狀態就是每個分片獨占一臺機器。這些集群規模和架構設計不應該是固定的,每一個業務系統應該根據自身實際業務去規劃設計。

?

這樣做確定分片數:

?

  • ES是靜態分片,一旦分片數在創建索引時確定那么后繼不能修改;

  • 數據量在億級別,8或者16分片夠用,分片數最好是2的n次方;

  • 如果后繼數據量的增長超過創建索引的預期,那么需要創建新索引并重灌數據;

  • 創建mapping是請自行制定分片數,否則創建的索引的分片數是ES的默認值。這其實并不符合需求;

  • 副本數:一般設置為1,特色要求除外。

?

Q2:ES 優化做過哪些措施?

?

A:ES使用最佳實踐:寫入的數據考慮清楚是否會過期,ES擅長的不是存儲而是搜索,所以一般存入ES的數據難免會隨著時間刪除舊數據。刪除方法有兩種:①按記錄(不推薦)②按索引。推薦使用后者,所以需要業務根據數據特點,按天、月、季度等創建索引。分片數夠用就好,不要過多不要過少。ES不是數據庫,不建議做頻繁的更新。

?

Q3:集群可承受的 TPS 是多少?

?

A:這個沒有具體的數字,根據不同規模集群、不同的索引結構等不同,建議根據業務評估自己的流量,壓測雙倍流量,若ES無法承受或滿足,可以考慮擴容集群,不要流量暴增于平時的3倍、4倍,甚至更多的規模。

?

Q4:ES 主要是用于明細單查詢,還是聚合統計?Join 對資源耗用大嗎?如何控制內存及優化?

?

A:ES在訂單系統中的實踐主要是解決復雜查詢的問題,ES不建議使用聚合統計,如果非要使用那我也攔不住你,哈哈哈。

?

深分頁的問題【內存】

ES處理查詢的流程如下:

  • Client需要第N到N+m條結果;

  • 接到這個請求的ES server(后繼稱之為協調者)向每一個數據分片所在的數據節點發送請求;

  • 每一個數據節點都需要向協調者返回(N+m)個結果;

  • 如果有n個數據分片,那么協調者拿到n * (N+m)個結果,排序,扔掉(n-1) * (N+m)個結果,返回給client N+m個結果;

  • 如果N是10W,100W,那么協調者的內存壓力會非常大;

  • 在我們目前維護的2.1版本中,ES已經不容許N>10000了。

  • ?

    深分頁的危害:導致打爆節點內存引起集群整體不可用。

    ?

    Q5:應用 canal 同步數據,會有延遲嗎?

    ?

    A:首先來說下ES 特點:Elasticsearch是一個接近實時的搜索平臺。這意味著,從索引一個文檔直到這個文檔能夠被搜索到有一個輕微的延遲(通常是1秒),這個參數也是可以調整的,根據業務場景調整。

    ?

    可以肯定的是延遲是肯定的。其實延遲大小完全取決你整個同步流程中是否有瓶頸點,如果業務要求實時的,其實不建議在這種場景下使用ES。就好比數據庫查詢從庫不能接受延遲,那就不要做讀寫分離,或者都查詢主庫。

    ?

    Q6:sqlproxy 具體用的哪個?

    ?

    A:sqlproxy這個是指MySQL讀寫分離的實現,大家可以網上查詢下有很多資料。官網地址:https://dev.mysql.com/doc/connector-j/5.1/en/connector-j-master-slave-replication-connection.html

    ?

    ?

    <mvn.jdbc.driver>com.mysql.jdbc.ReplicationDriver</mvn.jdbc.driver>

    <mvn.jdbc.url>jdbc:mysql:replication://m.xxx.com:3306,s.xxx.com:3306/dbName</mvn.jdbc.url>

    ?

    ?

    Q7:Redis 用于查詢緩存、分發任務緩存?

    ?

    A:Redis在項目中的使用場景,緩存查詢,分布式鎖使用。其中還有一個異步任務是通過redis zset + tbschedule 定時或實時的去執行一些業務邏輯。

    ?

    添加隊列數據方法:

    ?

    public Boolean zAdd(String key, final double score, String value) ;

    ?

    查詢獲取隊列數據:

    ?

    public Set<String> zRangeByScore(String key, final double min, final double max) ;

    ?

    Q8:容量評估可以講一些細節嘛?

    ?

    A:基本有兩種場景:

    ?

  • 日常業務流程是否有瓶頸 ;

  • 大促期間根據流量預估系統是否有瓶頸。

  • ?

    京東到家內部系統是有一套完整的監控系統,基于接口,應用機器,集群的多維度監控。

    ?

    • 接口:

    • 響應時間,tp99,tp999,tp9999 等;

    • 接口調用量,次數/分鐘;

    • 可用率。

    ?

    • 應用機器

    根據監控可以查看單機器相關指標數據是否正常,比如:

    • CPU使用率;

    • 系統負載;

    • 網絡IO;

    • TCP連接數,線程數;

    • 磁盤使用率。

      ?

    • 集群

    • Redis集群;

    • ES集群;

    • MySQL集群。

    ?

    對于集群來說是根據集群下機器指標是否正常來評估整個集群是否正常。需要看集群可以承載業務流量的TPS、QPS等指標是否滿足業務需求,同時需要評估大促場景下是否可以滿足要求。這種情況就需要根據大促流量評估壓測,看集群以及應用,接口是否可以滿足需求。

    ?

    每個公司可以根據自身規則進行擴容,及架構升級。比如日常CPU超過60%考慮應用擴容,負載遠大于機器核數等等。

    ?

    Q9:異步定時任務用的是什么中間件?

    ?

    A:tbschedule是一個支持分布式的調度框架,讓批量任務或者不斷變化的任務能夠被動態的分配到多個主機的JVM中, 在不同的線程組中并行執行,所有的任務能夠被不重復,不遺漏的快速處理。基于ZooKeeper的純Java實現,由Alibaba開源。

    ?

    Q10:在云上部署還是物理服務器?

    ?

    A:應用都部署在云服務器上,首先即時,幾分鐘即可完成,可一鍵部署、也可自主安裝操作系統。安全性方面因為服務分布在多臺服務器、甚至多個機房,所以不容易徹底宕機,抗災容錯能力強,可以保證長時間在線。彈性以及可擴展性方面云主機基本特點就是分布式架構,所以可以輕而易舉地增加服務器,成倍擴展服務能力。

    ?

    Q11:RPC 高可用怎么實現?

    ?

    A:RPC高可用基本都是借助于分布式框架,阿里開源dubbo,Spring全家桶的SpringCloud,包括我們使用的京東自研的JSF。其工作原理,感興趣的同學可以網上搜下,很多資料。在這兒就不一一解答了。

    總結

    以上是生活随笔為你收集整理的京东订单系统高可用架构及演变过程的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

    国产v视频 | 亚洲精品乱码久久久一二三 | 在线免费黄 | 亚洲成人av一区二区 | 久久中文字幕在线视频 | 日韩国产精品一区 | 欧美黑人性爽 | 伊人亚洲精品 | 欧美日韩国产一区二区三区 | 欧美性受极品xxxx喷水 | 日韩电影在线看 | 日本精品视频一区二区 | 久久久片| 国产免费黄色 | 在线观看mv的中文字幕网站 | 亚洲欧美视频在线 | 成人国产精品一区二区 | 国产1区在线 | 日韩欧美一区二区三区视频 | 国产不卡免费视频 | 亚洲精品午夜久久久久久久久久久 | 国产精品美女免费看 | 欧美国产日韩激情 | 亚洲激精日韩激精欧美精品 | 亚洲精品三级 | 日韩久久久久久 | 成人小电影在线看 | 丁香婷婷综合色啪 | 天天射天天操天天干 | 欧美日韩高清一区二区 国产亚洲免费看 | 国产第一页精品 | av中文字幕在线看 | 亚洲精品综合一区二区 | 91亚洲激情 | 成人app在线免费观看 | 奇米7777狠狠狠琪琪视频 | 91av在线看| 99免费在线视频观看 | 色黄视频免费观看 | 国产亚洲在线观看 | 日韩精品黄 | 国内精品久久久久影院一蜜桃 | 国产免费久久精品 | av在线电影网站 | 9在线观看免费高清完整版在线观看明 | 一区二区三区视频网站 | 在线观看91网站 | 天天看天天干 | 欧美日韩99 | 久草精品视频在线观看 | 久久久精品国产一区二区电影四季 | 亚洲精品自拍视频在线观看 | 亚洲va欧美va人人爽春色影视 | 日韩大片在线免费观看 | 午夜电影一区 | 久久免费视频精品 | 国产一级黄色电影 | www操操 | 99久久精品免费看国产麻豆 | 日韩免费在线观看视频 | 久久久久综合视频 | 国产日韩中文在线 | 激情av资源 | 久久久久久久久久久影视 | 国产精品久久久久久久久久免费 | 久久综合国产伦精品免费 | 中文字幕婷婷 | 日韩欧美在线中文字幕 | 国产视频999 | 精品国精品自拍自在线 | 日日爽 | 97视频网站 | 91色偷偷 | 国产99久久九九精品免费 | 欧美国产日韩中文 | 久久只有精品 | 欧美一级性生活视频 | 久久久国产精品亚洲一区 | 亚洲日韩中文字幕在线播放 | 久久综合视频网 | 91综合视频在线观看 | 精品国产一区二区三区日日嗨 | 探花视频在线观看免费 | 欧美日韩免费一区二区 | 亚洲香蕉在线观看 | 五月综合激情婷婷 | 操操操天天操 | 91片黄在线观看动漫 | 日韩一区二区三免费高清在线观看 | 四虎永久精品在线 | 国语久久| 成人av在线网址 | 日韩高清av | 色五月激情五月 | 亚洲最大成人网4388xx | 成人高清av在线 | 亚洲精品小视频 | 亚洲精品国偷拍自产在线观看蜜桃 | 久久综合成人网 | freejavvideo日本免费 | 日韩精品久久久久久久电影99爱 | 99精品免费网| 亚洲精品五月天 | 久久免费a| 九九久久精品视频 | 在线免费亚洲 | 精品一区 在线 | 久久精品麻豆 | 日韩av电影中文字幕在线观看 | 美女性爽视频国产免费app | av3级在线| 91久久国产综合精品女同国语 | 91视频国产免费 | 九九99| 很黄很黄的网站免费的 | 日韩综合精品 | 中文字幕人成不卡一区 | 夜夜摸夜夜爽 | 国产精品久久久久久久久软件 | 1000部国产精品成人观看 | 亚洲干 | 日韩欧美国产精品 | 狠狠狠色丁香婷婷综合激情 | 黄色大片av | 天天鲁天天干天天射 | 色婷婷综合视频在线观看 | 黄色资源在线观看 | 久久精品久久国产 | 玖玖在线视频观看 | 亚洲一区二区三区四区在线视频 | 久久手机免费视频 | 999久久久久久久久6666 | 欧美日本日韩aⅴ在线视频 插插插色综合 | 又黄又网站 | 亚洲欧美日韩中文在线 | 在线视频你懂得 | 国产麻豆精品95视频 | 91精品视频在线免费观看 | 亚洲欧美日韩精品一区二区 | 玖玖视频| 一本一道波多野毛片中文在线 | 天天艹 | 久久国产精品色av免费看 | 国产一级二级三级在线观看 | 西西44人体做爰大胆视频 | 亚洲欧洲视频 | 999久久国精品免费观看网站 | 麻豆激情电影 | 91精品中文字幕 | 欧美成人在线网站 | 久草在线资源网 | 高清不卡一区二区在线 | 国精产品999国精产 久久久久 | 亚洲精品乱码久久久久v最新版 | 91精品专区 | 国产精品久久久久久五月尺 | 色鬼综合网 | 17婷婷久久www | 91 中文字幕 | 成人永久在线 | 91高清视频免费 | 欧美日韩不卡一区二区三区 | 日韩免费播放 | 欧美日性视频 | www.香蕉视频在线观看 | 国产成人久 | 中文字幕精品三级久久久 | www国产亚洲精品 | 九九九九免费视频 | 国产一区二区在线精品 | 97精品国产97久久久久久 | 久久亚洲人 | 亚洲国产精品激情在线观看 | 一区二区三区免费播放 | 91成人精品一区在线播放 | 久久久亚洲国产精品麻豆综合天堂 | 亚洲国产精品视频 | 最新国产福利 | 久久国产电影院 | 狠狠色噜噜狠狠狠狠 | 91精品欧美一区二区三区 | 97超碰免费 | www免费| 9999亚洲| 婷婷综合五月 | 中文字幕在线观看亚洲 | 超碰在97 | 五月婷久 | 黄色视屏在线免费观看 | 国产拍揄自揄精品视频麻豆 | 久久久久综合精品福利啪啪 | 天天色天天综合 | 天天操天天射天天舔 | 欧美在线91 | 一级免费观看 | 日韩在线电影 | 国产精品午夜在线观看 | 日本少妇视频 | av免费网站观看 | 亚洲毛片在线观看. | 啪啪激情网 | 国产精品五月天 | 日日摸日日 | 国产精品毛片一区二区在线 | 欧美精品亚洲精品 | 国产亚洲精品久久19p | 色多多污污 | 国产成视频在线观看 | 久久精品国产一区二区 | 网址你懂的在线观看 | 黄污网| 91香蕉国产在线观看软件 | 久久久激情视频 | 日韩色在线观看 | 成片人卡1卡2卡3手机免费看 | 天天射天天爽 | 麻豆一区二区三区视频 | 免费在线观看av不卡 | 精品视频亚洲 | 日韩av黄 | 精品亚洲一区二区三区 | 亚洲精品网站在线 | 日韩精品91偷拍在线观看 | 久久精品99国产精品亚洲最刺激 | 国产在线探花 | 亚洲精品视频网站在线观看 | 首页国产精品 | 99久久99久国产黄毛片 | 人人草在线观看 | 亚洲aⅴ一区二区三区 | 国产精品久久久久免费a∨ 欧美一级性生活片 | 久久久久麻豆v国产 | 在线观看电影av | 91毛片在线 | 国产视频一区在线免费观看 | 99色| 在线观看激情av | 黄色网在线免费观看 | 99视屏| 久久久久久久久久久成人 | 国产一级精品在线观看 | 九九热久久免费视频 | 久久国产精品电影 | 中文字幕黄色av | 欧美激情视频一区二区三区免费 | 在线观看岛国片 | 日韩超碰在线 | 久久艹国产| 最近更新中文字幕 | 香蕉视频在线看 | 国产精品一区二区三区视频免费 | 欧美一二三视频 | 久久丁香 | 免费久久久久久久 | 日日夜夜狠狠干 | 国产成人61精品免费看片 | 成人黄色影片在线 | 91精品亚洲影视在线观看 | 久久综合九色综合欧美就去吻 | 日韩精品高清视频 | 国产精品 国内视频 | 麻豆国产精品va在线观看不卡 | 五月天视频网站 | 在线观看黄网站 | 日韩成人精品 | 国产福利一区在线观看 | 欧美日韩精品综合 | 8x成人在线| 99视频免费 | 日韩在线免费观看视频 | 五月天综合激情网 | 免费看的国产视频网站 | 美女免费视频网站 | 国模视频一区二区三区 | 国产成人久久精品77777综合 | 亚洲成a人片在线观看中文 中文字幕在线视频第一页 狠狠色丁香婷婷综合 | 色在线最新 | 久久久91精品国产一区二区精品 | 日韩精品无码一区二区三区 | 九色琪琪久久综合网天天 | 国产亚洲成人精品 | 中文字幕视频播放 | 丁香视频五月 | 中文字幕在线影院 | 成人网在线免费视频 | 在线观看亚洲视频 | 久久久精品国产一区二区三区 | 高清久久久久久 | 久久久www成人免费毛片 | 国产不卡一二三区 | 91探花在线 | 中文字幕亚洲情99在线 | 日韩欧三级| 成人羞羞视频在线观看免费 | av中文字幕不卡 | 麻豆视频在线 | 99热这里只有精品国产首页 | 国产在线观看免费 | 一区中文字幕电影 | 亚洲欧美国产精品 | 日批视频在线播放 | 亚洲精品在线资源 | 国产日产精品一区二区三区四区的观看方式 | 国模一区二区三区四区 | 91色九色| 99久久这里有精品 | 伊人天天色| 亚洲黄色一级视频 | 日韩av线观看 | 99性视频| 天天干 夜夜操 | 999久久久久久久久久久 | 六月丁香婷 | 三级黄色理论片 | 看片网站黄色 | 日韩亚洲精品电影 | 欧美韩国在线 | 色婷婷免费视频 | 亚洲精品视频免费在线观看 | 97国产精品 | 欧美性生活久久 | 91在线观看视频 | 久久精品伊人 | 91精品啪在线观看国产 | 超级碰碰碰免费视频 | www.狠狠| 99久热在线精品 | 黄色的网站免费看 | 夜夜高潮夜夜爽国产伦精品 | 99精品视频在线观看视频 | 国产成人a亚洲精品v | 天天草天天 | 久久精品视频播放 | 国产视频久 | 91精品毛片| 99热在线国产| 国产在线超碰 | 国产精品少妇 | 国色天香永久免费 | 91九色porny蝌蚪视频 | 婷婷激情在线观看 | 国内精品久久久久影院一蜜桃 | www夜夜 | 九草视频在线观看 | 免费中午字幕无吗 | 久久免费黄色 | 日韩欧美高清一区二区三区 | www.com久久| 天天摸夜夜添 | 日韩黄色网络 | av一级片在线观看 | 亚洲精品久久久蜜臀下载官网 | 久久免费观看视频 | 国产片网站| 91九色国产在线 | 激情网站免费观看 | 日韩欧美在线观看一区二区三区 | 日韩视频a | www.久久精品视频 | 日本中文字幕在线一区 | 欧美极品少妇xxxxⅹ欧美极品少妇xxxx亚洲精品 | 欧美大片mv免费 | 超碰成人免费电影 | 久久99视频免费观看 | 欧美一二区在线 | 日韩电影中文字幕在线观看 | 国产精品二区在线观看 | 午夜av一区 | av怡红院 | 黄色aaa级片 | 精品字幕 | 91免费高清 | 超碰激情在线 | 久久久国产精品一区二区三区 | av电影中文字幕在线观看 | 正在播放国产91 | 亚洲欧美激情精品一区二区 | 天天天天综合 | 日韩av在线网站 | 日韩精品一区二区三区免费观看视频 | 日韩欧美在线视频一区二区 | 久久歪歪 | av解说在线观看 | 国产成人精品一区二区三区免费 | 久久精品亚洲国产 | 国产乱码精品一区二区蜜臀 | 伊人五月天婷婷 | 99免费看片| 久久久免费观看视频 | 天天弄天天操 | 久久在线视频精品 | 亚洲精品欧美专区 | 一本一本久久a久久精品综合小说 | 91丨九色丨丝袜 | 国内丰满少妇猛烈精品播放 | 久久久久久久影院 | 欧美一级黄色视屏 | 手机成人av在线 | 丁香激情婷婷 | av免费在线观看网站 | 婷婷中文字幕综合 | av免费在线网站 | 国产精品久久久久久av | 欧美一级特黄aaaaaa大片在线观看 | 国产专区视频 | 欧美精品国产综合久久 | 天天人人 | 亚洲国产成人在线播放 | 久久久国产99久久国产一 | 中文久草 | 国产一区二区中文字幕 | a级免费观看 | 成人av电影免费在线播放 | 亚洲精品国产品国语在线 | 98久9在线 | 免费 | 国产小视频在线观看免费 | 青青河边草免费观看完整版高清 | 人人射人人爱 | 91在线一区二区 | 久久精品一区二区三 | 在线日韩 | 国色天香在线观看 | 日韩一区二区三区不卡 | 国产va饥渴难耐女保洁员在线观看 | 国产成人黄色av | 亚洲在线色 | 日本精品视频在线观看 | 夜夜操天天 | 亚洲天天在线 | 日韩毛片在线一区二区毛片 | 97视频在线观看网址 | 国产九九九视频 | av福利在线导航 | 精品国产乱码久久久久 | www.狠狠 | 午夜免费在线观看 | 最近中文字幕大全中文字幕免费 | 日韩在线视频一区二区三区 | 久久久蜜桃 | 日韩电影精品一区 | 天天看天天干天天操 | 日本99久久 | 在线视频国产区 | 日韩午夜视频在线观看 | 日韩特黄一级欧美毛片特黄 | 91麻豆精品国产91久久久久久 | 久久久久久影视 | 九七视频在线 | 精品在线观| 99在线看 | 国产69精品久久久久99 | 五月综合久久 | 天天操天天弄 | 久久电影日韩 | 久久久在线免费观看 | 日韩视频三区 | 日韩中文字幕在线看 | 久久久精品网站 | 三级av小说 | 婷婷在线不卡 | 欧美日韩在线精品一区二区 | 欧美成人在线网站 | 亚洲一区二区三区91 | 91chinesexxx| 日韩高清无线码2023 | 麻豆视传媒官网免费观看 | 亚洲精品国产成人 | 午夜精品久久久久久久爽 | 在线观看亚洲电影 | 亚洲aⅴ免费在线观看 | 日韩精品高清不卡 | 在线看片一区 | 九色琪琪久久综合网天天 | 蜜桃传媒一区二区 | 国产91精品欧美 | 天天爽天天射 | 免费高清av在线看 | 国产精品久久久区三区天天噜 | 欧美色图另类 | 中文字幕久久久精品 | 在线视频观看亚洲 | 久久久在线 | 狠狠干夜夜爽 | 国产91全国探花系列在线播放 | 黄色软件网站在线观看 | 97视频人人澡人人爽 | 特及黄色片 | av丝袜美腿| 亚洲精品乱码久久久久久高潮 | 免费看黄在线 | 91精品国产一区二区三区 | www免费| 在线国产黄色 | 色综合色综合久久综合频道88 | 亚洲国产精品小视频 | 国产福利久久 | 日韩一区精品 | 国产精品久久久久久久久久尿 | 婷婷亚洲激情 | 中文字幕一区在线观看视频 | 99精品影视 | 久久精品99久久久久久 | 国产精品粉嫩 | 黄色三级网站在线观看 | 麻豆果冻剧传媒在线播放 | 日韩精品综合在线 | 欧美乱码精品一区 | 免费a视频在线 | 超碰在线观看av | 成人午夜毛片 | 天天天干夜夜夜操 | 亚洲国产av精品毛片鲁大师 | 曰本三级在线 | 91成品人影院 | 国产亚洲精品福利 | 亚洲91在线| 国产自制av | 91手机视频 | 日韩色中色| 免费高清在线观看成人 | 亚洲 欧美 另类人妖 | 精品国产精品久久一区免费式 | 免费欧美精品 | 涩涩资源网 | www.久久色 | 免费观看成年人视频 | 欧洲视频一区 | 探花视频在线观看免费 | 精品福利av| 天堂激情网 | 成年人视频在线免费观看 | 亚洲h在线播放在线观看h | 免费在线成人av电影 | 久久久免费高清视频 | 波多野结衣视频在线 | 一区二区三区在线免费 | 一区二区三区免费在线观看 | 青青草国产在线 | 日韩精品极品视频 | 日韩黄色大片在线观看 | 国产精品一区在线观看 | 91丨九色丨国产在线观看 | 国产97色 | 日韩av二区 | 久久久999| 97福利社| 久久91久久久久麻豆精品 | 国内精品免费久久影院 | 成人小视频在线观看免费 | 日韩精品在线一区 | 亚洲日本一区二区在线 | 日韩三级精品 | 中文字幕在线久一本久 | 天天综合视频在线观看 | 成人一级免费电影 | 9热精品 | 狠狠色2019综合网 | 国产一区二区三精品久久久无广告 | 亚洲一区二区黄色 | 一级黄色大片在线观看 | 91高清完整版在线观看 | 日本99热| 午夜影院在线观看18 | 在线观看岛国片 | 欧美日韩亚洲在线观看 | 久久视频国产 | 久久精品123| 在线亚洲精品 | 91九色视频在线 | 久久精品区 | wwwwww色 | 久久精品视频在线免费观看 | 精品在线视频一区二区三区 | 国产精品免费在线观看视频 | 欧美日韩在线视频一区 | 久久黄色影视 | 黄色免费网站下载 | 日韩欧美观看 | 999久久久国产精品 高清av免费观看 | 欧美日韩一级久久久久久免费看 | 在线免费高清 | 国产午夜精品一区二区三区四区 | 亚洲精品资源在线观看 | 五月天综合网站 | 999日韩| 就要干b | 人人爽人人舔 | 91在线观| 九九九热精品免费视频观看网站 | 中文字幕日韩av | 在线视频精品 | 亚洲天堂精品视频 | 天天操天天色天天射 | 九九在线国产视频 | 日韩欧美精品在线观看 | 国产在线观看二区 | 9在线观看免费高清完整版 玖玖爱免费视频 | 欧美嫩草影院 | 久久超碰网 | 日韩中文字幕网站 | 伊人狠狠色丁香婷婷综合 | 韩国一区视频 | 中文字幕精品www乱入免费视频 | 色综合人人 | 久久精品毛片 | 91在线观看高清 | 亚洲aⅴ在线 | 天天做天天爱夜夜爽 | 久久99视频免费 | 国产精品久久久久久久久免费看 | 国产区高清在线 | 国产精品一区二区在线看 | www色com | 99久免费精品视频在线观看 | 国产精品va在线观看入 | 在线黄色av| 日韩网站中文字幕 | av性网站| 97超碰人人澡人人爱学生 | 久久精品国产亚洲精品2020 | 91女人18片女毛片60分钟 | 久久国产精品99久久人人澡 | 在线观看福利网站 | 99精品视频在线免费观看 | 色姑娘综合网 | 黄色成人毛片 | 免费手机黄色网址 | av在线电影网站 | 在线国产高清 | 波多野结衣视频一区二区三区 | 毛片99| 97在线视频免费 | 久久公开免费视频 | 欧洲色吧 | 狠狠色伊人亚洲综合网站野外 | 国产69久久久欧美一级 | 在线视频麻豆 | 四虎成人精品永久免费av | 91传媒免费观看 | 综合成人在线 | 五月天综合网站 | 日韩中文字幕在线看 | 黄色av网站在线免费观看 | 日韩视频免费在线观看 | 天天综合入口 | 日本九九视频 | 麻豆成人在线观看 | 国产97在线播放 | av在线网站免费观看 | 麻豆影视网 | 日本久久久久久久久久 | 美女黄色网在线播放 | 久久亚洲综合国产精品99麻豆的功能介绍 | 亚洲精品国产精品久久99热 | 午夜 在线 | 亚洲黄色免费电影 | 国产高清在线视频 | 天天天天天操 | 婷婷av色综合 | 美女国内精品自产拍在线播放 | 爱爱一区 | 蜜臀久久99精品久久久酒店新书 | 在线视频专区 | 亚洲女同ⅹxx女同tv | 99精品免费在线观看 | 国产无限资源在线观看 | 国产精品美女999 | 一级片在线 | 中文十次啦 | 欧美激情第一页xxx 午夜性福利 | 久久综合激情 | 日韩中文字幕免费电影 | 激情影音先锋 | 97视频免费播放 | 超碰在线公开 | 亚洲午夜久久久久久久久电影网 | 久久看片网 | 区一区二在线 | 天天在线免费视频 | 999一区二区三区 | 欧洲精品在线视频 | 99久久国产免费,99久久国产免费大片 | 9999精品免费视频 | 国产精品高清一区二区三区 | 亚洲黄a | 在线三级av | 日韩精选在线观看 | 亚洲欧美在线观看视频 | 国产精品嫩草影院123 | 国产福利资源 | 天天爱av导航 | 在线播放日韩av | 国产小视频你懂的在线 | 97久久久免费福利网址 | 成人激情开心网 | 国产精品久久久久久久久免费看 | 久久久久久久久久久影院 | 中文字幕国产一区二区 | a色视频| 亚洲三级影院 | 日韩欧美一区二区三区在线 | 久久久免费播放 | 麻豆91精品91久久久 | 国内久久看 | 国产成人精品亚洲日本在线观看 | 国产高清不卡av | 涩av在线 | 久草资源在线 | 免费av网址大全 | 九九热国产视频 | 日韩网站中文字幕 | 日韩特级毛片 | 又黄又刺激的视频 | 91超国产| 欧美91视频 | 欧美午夜a | 日韩中文字幕免费 | 久久天天躁狠狠躁亚洲综合公司 | 亚洲精品国产综合99久久夜夜嗨 | 成人在线视频观看 | 成人黄色小说网 | 久久视讯 | 久久深夜福利免费观看 | 国产精品网站一区二区三区 | 久久精品一区八戒影视 | 中文字幕第一页在线 | 成人中文字幕在线观看 | 最新超碰在线 | 国产精品 亚洲精品 | 99视频精品在线 | 99精品久久只有精品 | 亚洲一区在线看 | 玖玖色在线观看 | 中文字幕av在线电影 | 成人av一级片 | 一区在线观看 | 99精品视频在线看 | 日韩在线二区 | 天天色天天综合网 | 日韩成人精品在线观看 | 亚洲精品乱码久久久久 | 999国产精品视频 | 久久九九视频 | 亚洲欧洲精品在线 | 亚在线播放中文视频 | 久久论理 | 国产精品mv | 国内精品久久影院 | 欧美性色19p | 丁香久久激情 | 亚洲精品在线观看免费 | 精品久久久久久综合 | 国产精品久久久久久久av大片 | 成人午夜毛片 | 超碰公开在线观看 | 天天操天天射天天插 | 中文字幕在线播放一区二区 | 欧美一区二区三区在线看 | 国产精品久久久久久久婷婷 | 日韩深夜在线观看 | 久久99热精品| 久艹在线免费观看 | 中文字幕在线观看91 | 在线观看电影av | 午夜在线观看影院 | 最近日本中文字幕 | 日韩av视屏在线观看 | 丁香婷婷综合网 | 欧美激情综合五月色丁香 | 亚洲第五色综合网 | 免费一级毛毛片 | 国产护士av | www.久久久久 | 国产高清在线视频 | 亚洲精品午夜国产va久久成人 | 天天干天天做 | 正在播放 国产精品 | 在线观看日韩国产 | 91中文在线观看 | 免费成人在线网站 | 精品毛片一区二区免费看 | 精品一区久久 | 国产精品久久久久国产精品日日 | 婷婷5月激情5月 | 中文字幕 欧美性 | 中文字幕亚洲欧美日韩2019 | 亚洲一区二区三区miaa149 | av线上免费观看 | 五月天丁香综合 | 五月天激情开心 | 午夜在线国产 | 精品国偷自产国产一区 | 国产一区二区三区免费视频 | 黄色a级片在线观看 | 男女激情网址 | 91色九色| 99国产精品一区 | 免费在线观看污网站 | 91一区二区在线 | 国产精品毛片久久 | 黄av资源 | 国产精品免费久久久久久 | 麻豆一二| 中文字幕在线观看免费 | av免费网站| 免费在线观看av片 | 亚洲爱视频 | 久久夜av| 欧美精品亚洲精品 | 在线 国产 日韩 | 亚洲精品乱码久久久久久蜜桃欧美 | 午夜视频免费 | 69精品视频在线观看 | 91看片成人 | 国产中文字幕在线 | 久久精品亚洲综合专区 | 五月婷婷狠狠 | 成人亚洲免费 | 亚洲视频综合在线 | 国产精品第72页 | 少妇做爰k8经典 | 久久久免费精品视频 | 国产精品videossex国产高清 | 国产精品第一页在线观看 | 亚洲国产中文在线 | 久久视频网址 | 人人爽网站 | 午夜精品一二区 | 中文在线8资源库 | 国产亚洲婷婷免费 | 亚洲女欲精品久久久久久久18 | 欧美日韩aa| 午夜精品一区二区三区可下载 | 亚洲综合色播 | 国产资源免费 | 午夜精品久久久久久久99水蜜桃 | 天天爽综合网 | 91在线蜜桃臀| www黄色软件 | 欧美-第1页-屁屁影院 | 在线a视频免费观看 | av在线亚洲天堂 | av中文电影| 五月婷在线视频 | 四虎影视成人永久免费观看视频 | 国产精品com | 成人性生交大片免费看中文网站 | 色婷婷综合久久久久中文字幕1 | 日韩电影在线观看一区二区三区 | 四虎成人精品永久免费av九九 | 在线电影91| 国产我不卡 | 成人小视频在线观看免费 | 久久久久电影网站 | 欧美一级淫片videoshd | 欧美少妇xxx | 久久久久久久久久久高潮一区二区 | 久久久精品二区 | 日韩伦理片hd | 中文字幕高清 | 欧美视频在线二区 | 欧美日韩一区二区三区免费视频 | 亚洲国产精品成人综合 | 日韩久久久久久久 | 久草97| 伊人久久精品久久亚洲一区 | 在线观看的av网站 | 国产又粗又长又硬免费视频 | 97超碰国产精品女人人人爽 | 2024国产精品视频 | 久久久久免费精品视频 | 亚洲精品日韩在线观看 | 国产精品成人一区二区三区 | 久久免费国产精品1 | 久久久久久国产精品999 | 狠狠操夜夜操 | 91视频免费| 国产美腿白丝袜足在线av | 特级西西444www大精品视频免费看 | 日本中文字幕影院 | 欧美日韩国产三级 | 在线免费av观看 | 欧美色综合久久 | 亚洲激情综合 | 欧美一区二区三区在线 | 在线观看亚洲精品 | 国产精品久久久久av福利动漫 | 日韩av在线看 | 欧美男同视频网站 | 久久综合一本 | 一区二区电影在线观看 | 999久久久免费精品国产 | 久久精品视频18 | 黄污污网站 | 国产精品ⅴa有声小说 | 国产日韩中文在线 | 在线a亚洲视频播放在线观看 | 四虎在线免费视频 | 一区二区三区精品在线 | 亚洲最新视频在线播放 | 日韩三区在线 | 丁香六月天 | 久久综合中文字幕 | 麻豆视频免费播放 | 91视频一8mav| 在线免费黄色 | 久草在线免费看视频 | 中文字幕日韩免费视频 | 日韩一区二区三区免费电影 | 亚洲精品国产精品99久久 | 亚洲精品视频在线观看免费视频 | 天天干天天操天天入 | 久久免费视频播放 | 2020天天干夜夜爽 | 日韩av电影手机在线观看 | 91porny九色91啦中文 | 国产综合福利在线 | 五月天综合在线 | 丁香 久久 综合 | 日韩欧美69 | 日韩理论片在线观看 | 国产亚洲精品久久久久秋 | 91九色蝌蚪视频 | av短片在线观看 | 亚洲国产精品第一区二区 | 日本最新一区二区三区 | 日韩av一区二区三区 | 超碰在线最新网址 | 日韩精品2区 | 国产精品一区二区在线 | 亚洲高清免费在线 | 日本 在线 视频 中文 有码 | 国内精品久久天天躁人人爽 | 久久精品欧美一区二区三区麻豆 | 婷婷亚洲五月色综合 | 国产日韩精品一区二区三区 | 中文字幕高清免费日韩视频在线 | 久久人人97超碰国产公开结果 | 综合色综合色 | 久久久久久久久久网站 | 国产999精品久久久久久绿帽 | 欧美成人在线免费观看 | 天天摸天天舔天天操 | 国产视频欧美视频 | 88av网站| 99在线热播| 97成人资源站 | 九九视频精品在线 | 二区三区在线观看 | 久久黄色免费观看 | 91福利影院在线观看 | 黄色大片日本免费大片 | 999久久精品 | 韩国av免费观看 | 在线一区观看 | 亚洲精品视频二区 | 亚洲精品视频在线播放 | 日韩 精品 一区 国产 麻豆 | 亚洲精品在线视频网站 | 亚洲成人资源在线观看 | 久久久久亚洲最大xxxx | 亚洲经典精品 | 最近高清中文字幕在线国语5 | 天天摸天天操天天舔 | 国产成人av电影 | 91精品久久久久久久99蜜桃 | 国产一级二级在线播放 | 日韩久久网站 | 欧美性生活久久 | 91日韩免费| 99精品国产免费久久久久久下载 | 久久久久久黄 | 人人澡人人干 | 午夜精品一区二区三区可下载 | 亚洲国产欧美在线人成大黄瓜 | 国产在线一线 | 国产在线观看一区 | 国产福利电影网址 | 国产精品一区二区无线 | 6080yy精品一区二区三区 | 亚洲毛片视频 | 国产精久久 | 国产精品日韩 | 久久精品99国产精品酒店日本 | 韩日三级在线 | 中文免费观看 | 婷婷色网视频在线播放 | 色国产精品 | 国产精品99久久免费黑人 | 午夜精品成人一区二区三区 | 探花视频在线观看免费 | 在线观看 国产 | 欧美一级片免费播放 | 五月激情婷婷丁香 | avove黑丝 | 国产手机视频在线播放 | 亚洲国产中文字幕在线 | 亚洲免费av网站 |