日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

轻松应对双11,百万级物理和虚拟网络设备的网络智能化实践

發(fā)布時(shí)間:2024/8/23 编程问答 54 豆豆
生活随笔 收集整理的這篇文章主要介紹了 轻松应对双11,百万级物理和虚拟网络设备的网络智能化实践 小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

摘要: 12月13-14日,由云棲社區(qū)與阿里巴巴技術(shù)協(xié)會(huì)共同主辦的《2017阿里巴巴雙11技術(shù)十二講》順利結(jié)束,集中為大家分享了2017雙11背后的黑科技。本文是《雙11的智能化網(wǎng)絡(luò)實(shí)踐》演講整理,主要講解了阿里巴巴在網(wǎng)絡(luò)智能領(lǐng)域通過數(shù)據(jù)手段極致地優(yōu)化運(yùn)營(yíng)場(chǎng)景,在穩(wěn)定性、成本、效率方面提升網(wǎng)絡(luò)運(yùn)營(yíng)競(jìng)爭(zhēng)力的技術(shù)。

12月13-14日,由云棲社區(qū)與阿里巴巴技術(shù)協(xié)會(huì)共同主辦的《2017阿里巴巴雙11技術(shù)十二講》順利結(jié)束,集中為大家分享了2017雙11背后的黑科技。本文是《雙11的智能化網(wǎng)絡(luò)實(shí)踐》演講整理,主要講解了阿里巴巴在網(wǎng)絡(luò)智能化技術(shù)中,大量級(jí)網(wǎng)絡(luò)下網(wǎng)絡(luò)變更、調(diào)度優(yōu)化技術(shù)的大幅度提升,故障快速發(fā)現(xiàn)、定位、恢復(fù)方面和資源優(yōu)化利用方面的技術(shù)突破,在網(wǎng)絡(luò)智能領(lǐng)域通過數(shù)據(jù)手段極致地優(yōu)化運(yùn)營(yíng)場(chǎng)景,在穩(wěn)定性、成本、效率方面提升網(wǎng)絡(luò)運(yùn)營(yíng)競(jìng)爭(zhēng)力。內(nèi)容如下。

分享嘉賓:

后羿(周寶方),阿里巴巴資深技術(shù)專家,參與8年雙11大戰(zhàn),主導(dǎo)阿里“去IOE”戰(zhàn)略落地,目前在推動(dòng)阿里基礎(chǔ)設(shè)施智能化。

后羿:首先給大家呈現(xiàn)的是阿里巴巴在雙11中主要依賴的網(wǎng)絡(luò)相關(guān)技術(shù)。在今年雙11中我們?cè)诜€(wěn)定性、高性能網(wǎng)關(guān)、去堆疊以及25G、骨干網(wǎng)流量調(diào)度平臺(tái)、流量的精準(zhǔn)評(píng)估、QOS優(yōu)化和成本優(yōu)化方面都取得了突破性的進(jìn)展。
助力雙11的重要網(wǎng)絡(luò)技術(shù)
在穩(wěn)定性的強(qiáng)化方面,在過去一年,阿里巴巴借助智能化手段,在故障的快速發(fā)現(xiàn)、自動(dòng)修復(fù)、自動(dòng)變更、快速診斷的能力上都有很大的強(qiáng)化,使之輕松應(yīng)對(duì)雙11流量高峰時(shí)的突發(fā)穩(wěn)定性問題;在優(yōu)化高性能網(wǎng)關(guān)方面,ANAT吞吐量性能16倍的提升和LVS性能8倍的提升使阿里巴巴輕松應(yīng)對(duì)ANAT轉(zhuǎn)發(fā)網(wǎng)關(guān)的壓力;4.2架構(gòu)支持去堆疊能力,提高了架構(gòu)可靠性;25G技術(shù)在5.0網(wǎng)絡(luò)架構(gòu)開始規(guī)模化使用,在存儲(chǔ)計(jì)算分離和在線混布場(chǎng)景中也開始落地;骨干網(wǎng)流量調(diào)度平臺(tái)做到了保底帶寬、延遲的優(yōu)化等方面都有好的用戶體驗(yàn)。

在過去一段時(shí)間內(nèi),阿里云水立方做到了基于應(yīng)用維度、按時(shí)間維度、任意角度的靈活運(yùn)營(yíng)流量精準(zhǔn)評(píng)估能力。利用水立方預(yù)測(cè)雙11業(yè)務(wù)流量和容量的分配,在端到端QOS優(yōu)化方面,阿里巴巴在存儲(chǔ)計(jì)算分離,在線離線存儲(chǔ)混布場(chǎng)景,及交易、支付等對(duì)用戶體驗(yàn)要求較高場(chǎng)景中獲得了更好的用戶體驗(yàn),保證相關(guān)的請(qǐng)求能得到優(yōu)先的傳輸。在成本優(yōu)化方面,AGN2.0骨干網(wǎng)升級(jí)取得了很大的進(jìn)展,自研光模塊和AOC的全面落地都使得整體成本得到很好的優(yōu)化。

阿里巴巴是一個(gè)擁有百萬級(jí)物理和虛擬網(wǎng)絡(luò)設(shè)備、承載多樣業(yè)務(wù)的遍布全球的統(tǒng)一的物理網(wǎng)絡(luò)。不同的供應(yīng)商在不同時(shí)期、不同版本、不同架構(gòu)的管理都是不同的,我們需要付出更多的精力駕馭一個(gè)復(fù)雜的網(wǎng)絡(luò)結(jié)構(gòu)。面對(duì)大量級(jí)的物理和虛擬網(wǎng)絡(luò)設(shè)備時(shí),如何用一套優(yōu)化的工程方法去進(jìn)行分析數(shù)據(jù);如何基于這些數(shù)據(jù)在后期做快速故障發(fā)現(xiàn)和定位;不同形態(tài)的業(yè)務(wù)對(duì)網(wǎng)絡(luò)有不一樣的需求,如何在兼顧資源利用率同時(shí)達(dá)到用戶體驗(yàn)很好的平衡;在面臨業(yè)務(wù)波動(dòng)頻繁的情況下,如何自證清白;在這些過程中如何快速完成綜合處理……這些都是阿里巴巴需要解決的客觀的工程難題。

上圖呈現(xiàn)的是我們?cè)?015年之后在網(wǎng)絡(luò)穩(wěn)定性提升方面的具體數(shù)據(jù)。從這張圖中可以看出,我們?cè)?5年到17年期間,穩(wěn)定性得到了很好的優(yōu)化。2017年P(guān)1 P2故障數(shù)對(duì)比2015年全年收斂了83%;P1 P2的故障數(shù)在十分鐘內(nèi)的恢復(fù)率對(duì)比2016年也得到了很好的改善。2016年在10分鐘內(nèi)的故障恢復(fù)率為38%,而在2017年則達(dá)到了72%。需要強(qiáng)調(diào)的一點(diǎn)是,阿里巴巴網(wǎng)絡(luò)設(shè)備大幅度增長(zhǎng),而網(wǎng)絡(luò)工程師和網(wǎng)絡(luò)運(yùn)維人員并無大幅度增長(zhǎng)。這主要得益于過去兩年我們?cè)谥悄芑系耐度搿?/p>

如何改進(jìn)處理故障過程

我們將網(wǎng)絡(luò)運(yùn)營(yíng)中的故障簡(jiǎn)單的劃分成變更類故障和非變更類故障:
對(duì)于變更類故障,借助自動(dòng)化變更這類自動(dòng)化工具來解決變更帶來的穩(wěn)定性隱患,通過快速迭代、快速優(yōu)化過程讓故障快速收斂。
對(duì)于非變更類故障,在故障發(fā)生前,通過加大巡檢力度,實(shí)時(shí)探測(cè)當(dāng)前線上的配置是否存在漏洞,并將巡檢結(jié)果呈現(xiàn)給運(yùn)營(yíng)工程師,運(yùn)營(yíng)工程師會(huì)系統(tǒng)化的逐步修復(fù)這些漏洞。
我們也在構(gòu)建科學(xué)預(yù)測(cè)方法,用網(wǎng)絡(luò)故障庫的形式逐步構(gòu)建全網(wǎng)網(wǎng)絡(luò)故障特征工程。利用特征庫預(yù)測(cè)故障存在的可能,做到防范于未然。在故障發(fā)生后,做到快速發(fā)現(xiàn)、快速診斷,當(dāng)我們已經(jīng)可以很好的定性一個(gè)特征故障時(shí),快速對(duì)其進(jìn)行修復(fù)。

快速發(fā)現(xiàn)模塊主要是用來提升精準(zhǔn)探測(cè)能力,診斷模塊用于提升端到端故障診斷速度。同時(shí),我們也在積極構(gòu)建整體網(wǎng)絡(luò)故障特征庫。通過分析歷史網(wǎng)絡(luò)故障體現(xiàn)的量化特征,精確描述故障的形態(tài)和量化特點(diǎn),幫助我們預(yù)知未來網(wǎng)絡(luò)的潛在的故障。巡檢系統(tǒng)在過去一年已經(jīng)穩(wěn)定上線,自動(dòng)化變更系統(tǒng)幫助我們很好的駕馭每一天面臨的大量的變更需求。這些就是我們?cè)诮鉀Q網(wǎng)絡(luò)穩(wěn)定性方面的整體思路。

當(dāng)我們已經(jīng)可以發(fā)現(xiàn)故障、定性故障時(shí),通過監(jiān)控系統(tǒng)和修復(fù)系統(tǒng)的快速聯(lián)動(dòng)完成自修復(fù),從而達(dá)成閉環(huán),這就是阿里巴巴網(wǎng)絡(luò)故障的自恢復(fù)。下圖展示了網(wǎng)絡(luò)自恢復(fù)過程及其自動(dòng)完成信息的對(duì)接和中間邏輯的判斷。

網(wǎng)絡(luò)自恢復(fù)相當(dāng)于快速發(fā)現(xiàn)和修復(fù)兩個(gè)模塊的自聯(lián)動(dòng)的過程。當(dāng)故障已經(jīng)發(fā)生時(shí),如何做到“發(fā)現(xiàn)即被修復(fù)”?

網(wǎng)絡(luò)自恢復(fù)主要有以下五部分構(gòu)成:
端口/鏈路類異常自動(dòng)隔離。
板卡類異常自動(dòng)隔離。
運(yùn)營(yíng)商流量智能調(diào)度容災(zāi)切換。
堆疊分裂類異常自動(dòng)恢復(fù)。
防火墻異常的自動(dòng)切換。
后續(xù)會(huì)逐步加入更多的場(chǎng)景。隨著場(chǎng)景的增多,到目前我們已經(jīng)有60%以上的風(fēng)險(xiǎn)隱患實(shí)現(xiàn)了自動(dòng)化的處理,大大降低了故障問題處理的時(shí)長(zhǎng),實(shí)現(xiàn)了真正的故障快速恢復(fù),這也證明我們?nèi)孢M(jìn)入了自動(dòng)化調(diào)度的時(shí)代。網(wǎng)絡(luò)故障處理全面進(jìn)入自動(dòng)化處理和智能化調(diào)度時(shí)代,60%以上的風(fēng)險(xiǎn)隱患已經(jīng)實(shí)現(xiàn)了自動(dòng)化處理,大大降低了問題處理時(shí)長(zhǎng),實(shí)現(xiàn)故障的快速恢復(fù)。

自恢復(fù)是一種怎樣的體驗(yàn)?當(dāng)監(jiān)控系統(tǒng)探知到一個(gè)具體故障正在發(fā)生時(shí),就會(huì)調(diào)用修復(fù)模塊來完成故障修復(fù),并在發(fā)現(xiàn)故障和修復(fù)完成故障后推送一條信息告知用戶情況。這個(gè)過程幾乎不需要人為的干預(yù)。我們希望借助一個(gè)大腦全面評(píng)估當(dāng)下穩(wěn)定性的情況,精準(zhǔn)確認(rèn)問題后通過調(diào)度工具平臺(tái)完成修復(fù)過程。這也是一個(gè)推動(dòng)智能化的過程。
智能調(diào)度與自動(dòng)隔離
如何解決好運(yùn)營(yíng)商的割接以及網(wǎng)絡(luò)的抖動(dòng)的問題避免用戶體驗(yàn)的下降和故障的發(fā)生是我們花很大時(shí)間研究的課題。通過對(duì)網(wǎng)絡(luò)質(zhì)量的全面感知,告訴業(yè)務(wù)系統(tǒng)哪里正在出現(xiàn)網(wǎng)絡(luò)質(zhì)量惡化和變動(dòng),這意味著我們需要做一些工作來改善整體用戶體驗(yàn)。在實(shí)際操作過程中,有很多細(xì)節(jié)需要我們考慮。運(yùn)營(yíng)商自動(dòng)切換的過程基本都能在不需人工干預(yù)的情況下快速完成。

從圖中可以看出,自從上線了自動(dòng)化場(chǎng)景后,BGP出口自動(dòng)化切換的成功率是100%,每自動(dòng)化切換一次都意味著系統(tǒng)幫助我們規(guī)避了一起故障。

在自動(dòng)隔離場(chǎng)景中,由于網(wǎng)絡(luò)設(shè)備在運(yùn)行過程中經(jīng)常會(huì)出現(xiàn)故障,在快速修復(fù)之前前,隔離是在網(wǎng)絡(luò)工程師解決問題的首要工作。從圖中可以看出,自動(dòng)隔離功能上線后,90%以上的隔離操作能自動(dòng)完成,而且成功率高達(dá)95%,這樣不僅省去了很多的人工還規(guī)避了很多潛在故障。

基于北斗系統(tǒng)的“快速發(fā)現(xiàn)”
北斗故障識(shí)別智能引擎有在線日志實(shí)時(shí)分析、異常流量實(shí)時(shí)探測(cè)、告警收斂三大模塊幫助精準(zhǔn)定位和發(fā)現(xiàn)。在線上我們每天要處理萬億級(jí)的數(shù)據(jù)信息,通過算法識(shí)別出大概1億條的基礎(chǔ)事件,進(jìn)一步識(shí)別后我們形成23萬左右的復(fù)雜事件,對(duì)復(fù)雜事件收斂形成300條左右的事件,其中有進(jìn)30條左右被轉(zhuǎn)化為工單。工單一般是通過人工干預(yù)或無人值守自動(dòng)化方式消化工單。

北斗故障識(shí)別智能引擎的工作流程主要分為四步:
利用龐大的數(shù)據(jù)采集系統(tǒng),將N多維度數(shù)據(jù)實(shí)時(shí)從設(shè)備服務(wù)器中采集匯總;
在實(shí)時(shí)計(jì)算平臺(tái)中利用各種機(jī)器學(xué)習(xí)算法和領(lǐng)域規(guī)則來完成基于場(chǎng)景的綜合分析;
通過各種告警規(guī)則生成復(fù)雜事件;
對(duì)復(fù)雜事件進(jìn)一步收斂。
在線日志實(shí)時(shí)分析。我們已經(jīng)對(duì)海量實(shí)時(shí)日志有97%以上的識(shí)別率,每天處理數(shù)億條平面日志,從日志中通過文本分析和積累,加上人工打標(biāo),覆蓋了所有廠商日志型號(hào)。剩余3%也有經(jīng)驗(yàn)豐富的網(wǎng)絡(luò)工程師幫助我們進(jìn)一步打標(biāo),完善知識(shí)庫。這是日志分析的大概運(yùn)作原理。

異常流量實(shí)時(shí)探測(cè)。為什么我們需要專門的模塊來做異常流量的識(shí)別?因?yàn)槟承?shù)據(jù)不能通過傳統(tǒng)方式確認(rèn)其是否異常,如延遲、日志量、網(wǎng)絡(luò)流量,這個(gè)數(shù)據(jù)在某個(gè)時(shí)段是正常的,但在另一個(gè)時(shí)段里是異常的。流量異常識(shí)別模塊解決了如何構(gòu)建一種智能決策算法,根據(jù)時(shí)間點(diǎn)和場(chǎng)景動(dòng)態(tài)調(diào)整對(duì)應(yīng)基線的問題。

告警收斂。當(dāng)收斂出幾十萬條異常事件后,如何進(jìn)一步確定異常的來源?我們將網(wǎng)絡(luò)的拓?fù)浼尤朐趫D計(jì)算引擎中。在對(duì)應(yīng)一個(gè)時(shí)間窗口內(nèi),點(diǎn)亮所有產(chǎn)生告警信息的事件對(duì)應(yīng)的拓?fù)鋱D結(jié)構(gòu)上。當(dāng)連續(xù)一段拓?fù)浔稽c(diǎn)亮后,把它當(dāng)做一個(gè)故障聯(lián)通子圖,利用智能化算法對(duì)對(duì)應(yīng)節(jié)點(diǎn)打分。通過rank值來確定出現(xiàn)故障設(shè)備源頭。


自動(dòng)變更的作用
自動(dòng)化變更已經(jīng)成為一個(gè)非常基礎(chǔ)的能力,它和內(nèi)部很多工具模塊和業(yè)務(wù)平臺(tái)完成對(duì)接,使數(shù)據(jù)得到了打通,降低故障率的同時(shí)提高效率。

為什么要有自動(dòng)變更模塊?
在運(yùn)營(yíng)百萬級(jí)網(wǎng)絡(luò)設(shè)備的情況下,每天會(huì)面臨非常多類似打補(bǔ)、OsS升級(jí)、路由變化、IP擴(kuò)容、回收等的變更需求。
在過去,這些變更操作高達(dá)85%的部分都是由人工來完成的。有些業(yè)務(wù)的操作需要規(guī)避白天時(shí)間,很多工程師由于長(zhǎng)期在晚上進(jìn)行高危變更操作,得不到好的休息,工作容易出錯(cuò)導(dǎo)致性循環(huán),帶來難以控制的風(fēng)險(xiǎn)。
由于變更工作的線下操作,很多可以變成經(jīng)驗(yàn)的東西沒有很好的在線上沉淀,而線下監(jiān)測(cè)環(huán)節(jié)又比較薄弱。
歷史上一邊工程師在操作變更,一邊故障在蔓延的事不僅一次出現(xiàn)。如何做到變更的同時(shí)進(jìn)行監(jiān)測(cè),實(shí)時(shí)感受變更現(xiàn)場(chǎng)網(wǎng)絡(luò)態(tài)勢(shì)感知是非常重要的。
一些高危的變更需要引入審核機(jī)制,這些都是我們之前面臨的現(xiàn)實(shí)問題。
我們是如何解決上述問題的呢?總的來說就是運(yùn)用通用的方法,更多的引用智能的手段,減少人工介入。一塊塊簡(jiǎn)單的樂高積木可以拼湊出如房子、飛機(jī)等非常復(fù)雜的形象。樂高積木的例子啟示我們對(duì)需要展開的變更操作進(jìn)行原子化的抽象,然后運(yùn)用狀態(tài)機(jī)組合成各式復(fù)雜的變更。在變更的同時(shí),實(shí)時(shí)采集對(duì)應(yīng)設(shè)備線上的告警信息,這些信息能告訴我們當(dāng)下的變更是怎樣一種情況。變更進(jìn)行過程中是否有大量告警信息急速蔓延,決定著我們當(dāng)下是否需要回滾,是否需要做現(xiàn)場(chǎng)決策和支持。

從圖中可以看出,在2017年自動(dòng)化變更上線后,變更引起的故障率有很大的降低,50%以上的變更實(shí)現(xiàn)了自動(dòng)化,人員的誤操作概率降為0。可想而知,變更的優(yōu)化效率得到了很大的提升。
網(wǎng)絡(luò)端到端智能快速診斷系統(tǒng)“庖丁”
在實(shí)際中我們經(jīng)常會(huì)面臨這樣一個(gè)問題,某個(gè)地方丟包比較高或者兩個(gè)點(diǎn)之間應(yīng)用出現(xiàn)了嚴(yán)重的超時(shí),究竟是怎么引起的?如果用人工的方式進(jìn)行定位,首先要解決如何了解兩個(gè)點(diǎn)之間端到端網(wǎng)絡(luò)拓?fù)涫窃鯓右环N結(jié)構(gòu)。拓?fù)渖犀F(xiàn)在有故障在發(fā)生嗎?如果有,這些故障設(shè)備究竟產(chǎn)生了哪些日志、過程中是否有變更在進(jìn)行?如果已經(jīng)知道是哪些設(shè)備為可疑對(duì)象,可能接下來對(duì)設(shè)備進(jìn)一步下發(fā)命令、對(duì)數(shù)據(jù)做深入診斷,整個(gè)過程大概需要1-2小時(shí)。

而庖丁可以同時(shí)進(jìn)行網(wǎng)絡(luò)拓?fù)浒l(fā)現(xiàn)、告警信息自動(dòng)聚合分析、日志信息自動(dòng)獲取、命令工具自動(dòng)下發(fā)這四項(xiàng)工作,把整個(gè)復(fù)雜問題的定位時(shí)長(zhǎng)從1-2個(gè)小時(shí)縮減為3分鐘,給各類場(chǎng)景帶來極大的診斷效率提升。針對(duì)已經(jīng)確定的兩個(gè)點(diǎn)的IP,我們自動(dòng)定義出所對(duì)應(yīng)的IP拓?fù)涫窃鯓右环N結(jié)構(gòu);對(duì)相應(yīng)拓?fù)滏溌飞系乃腥罩具M(jìn)行實(shí)時(shí)提取、標(biāo)注關(guān)鍵詞;對(duì)可疑設(shè)備的告警進(jìn)行自動(dòng)化聚合收斂、過濾無效信息;主動(dòng)對(duì)可疑設(shè)備進(jìn)行可疑探測(cè)、做二次分析。這些過程幾乎是一鍵完成。

庖丁運(yùn)作的可視化呈現(xiàn)如圖。對(duì)可疑故障鏈路進(jìn)行標(biāo)紅處理,通過庖丁可視化界面,輕松判斷故障的發(fā)生原因。

在故障發(fā)現(xiàn)、探測(cè)的最終結(jié)果可以對(duì)具體的用戶呈現(xiàn),也可以通過API形式對(duì)業(yè)務(wù)系統(tǒng)進(jìn)行主動(dòng)的信息推送。這意味著上層業(yè)務(wù)網(wǎng)絡(luò)查詢更加開放,通過對(duì)庖丁的一次查詢可以得知某個(gè)業(yè)務(wù)波動(dòng)是否是屬于網(wǎng)絡(luò)帶來的問題。

基于NetO做流量最優(yōu)化的分配
通過最優(yōu)化流量分配來榨干多余帶寬成本,同時(shí)滿足最優(yōu)路徑選擇、帶寬擴(kuò)容、穩(wěn)定性方面的現(xiàn)實(shí)需求。
技術(shù)層面。我們希望每次網(wǎng)絡(luò)路徑都是最優(yōu)的。傳統(tǒng)網(wǎng)絡(luò)基本基于Metric機(jī)制確定最短路徑。對(duì)于阿里這張具有多樣鏈路的網(wǎng)絡(luò),交易鏈路對(duì)網(wǎng)絡(luò)的延遲極其敏感,大數(shù)據(jù)需要很大的帶寬,需要更多可達(dá)路徑幫助快速進(jìn)行數(shù)據(jù)的傳輸。
帶寬擴(kuò)容角度。在面臨非常頻繁的帶寬擴(kuò)容需求情況下,實(shí)際的定時(shí)鏈路存在很多延時(shí)差異,兩個(gè)點(diǎn)之間的路徑帶寬差異也很明顯,我們需要站在運(yùn)營(yíng)的角度構(gòu)建某種方法,既能充分利用閑置的帶寬,又能在調(diào)配流量過程中很好的兼顧時(shí)延和成本。
穩(wěn)定性方面。并行的鏈路在出現(xiàn)單點(diǎn)故障時(shí),需要對(duì)其進(jìn)行隔離,隔離后如何觸發(fā)高可用路由決策。這些都是NetO需要解決的問題。NetO基于SDN采用了SR-TE技術(shù),幫助我們?cè)谌智闆r下拿到全網(wǎng)流量信息、路由狀態(tài)信息,用這些信息幫助我們按場(chǎng)景進(jìn)行路徑轉(zhuǎn)發(fā)。

NetO整體智能決策層模塊——闊海
闊海有兩大核心職能:
最大化業(yè)務(wù)目標(biāo)。不同的場(chǎng)景有不同的需求,我們希望NetO可以根據(jù)各種限制條件對(duì)每個(gè)場(chǎng)景綜合分析,定制最優(yōu)解決方案。
以無擁塞方式達(dá)成最優(yōu)分配方案。這要求我們最少的步驟解決問題,每一步對(duì)應(yīng)的命令需要設(shè)備的支持。闊海幫助我們做到最大化利用鏈路上限,在每次流量調(diào)整中,即不觸及帶寬上限又能完成最優(yōu)化調(diào)整,實(shí)現(xiàn)最小步驟的遷移。
闊海有兩種驅(qū)動(dòng)方式,一是周期性運(yùn)行;二是通過突事件觸發(fā),如拓?fù)浒l(fā)生變化、流量發(fā)生變化等。闊海一個(gè)數(shù)據(jù)平臺(tái),需要用各個(gè)維度的實(shí)時(shí)數(shù)據(jù)來進(jìn)行現(xiàn)狀態(tài)勢(shì)感知,通過數(shù)據(jù)背后業(yè)務(wù)含義幫助我們制定最優(yōu)化分配方案。這些方案完全可以按不同需求對(duì)成本、時(shí)延、帶寬利用率組合定制場(chǎng)景。

闊海有非常好的可靠性來幫助它做負(fù)載均衡。每次計(jì)算出的最優(yōu)化結(jié)果可以通過兩種方式來呈現(xiàn):
通過仿真在web頁面來呈現(xiàn),告訴運(yùn)營(yíng)決策人員最優(yōu)化結(jié)果會(huì)達(dá)成怎樣的效果,讓對(duì)應(yīng)運(yùn)營(yíng)人員做現(xiàn)狀評(píng)估。
直接用最優(yōu)化結(jié)果進(jìn)行設(shè)備命令的下發(fā),完成一次優(yōu)化調(diào)度。

這里給大家舉三種常見的場(chǎng)景,黑色線條代表物理鏈路,其他顏色線條代表邏輯鏈路。

故障狀態(tài)下的負(fù)載均衡。從第一個(gè)場(chǎng)景的圖中可以看到三條鏈路在初始狀態(tài)下進(jìn)行數(shù)據(jù)的通信。通信鏈路出現(xiàn)單點(diǎn)故障時(shí), NetO會(huì)把藍(lán)色鏈路的流量動(dòng)態(tài)的分配到其他兩條鏈路上去。

針對(duì)高費(fèi)用鏈路的解決措施。從實(shí)際角度出發(fā),每條鏈路意味著不同的資費(fèi),為了節(jié)省成本,提高資源利用率,我們完全可以采取靈活的策略來運(yùn)行。如下圖所示,我們?cè)谶\(yùn)行過程中發(fā)現(xiàn)其中一條鏈路的成本偏高,這時(shí)NetO會(huì)自動(dòng)觸發(fā)一次調(diào)用,把流量分配到相對(duì)來說成本較低的鏈路上,這個(gè)過程基本不需要人工的干預(yù)。

大數(shù)據(jù)場(chǎng)景優(yōu)化傳輸時(shí)間。比如我們需要發(fā)送一個(gè)單位的數(shù)據(jù),在初始狀態(tài)下,以圖中紅綠兩條鏈路發(fā)送數(shù)據(jù)時(shí),由于帶寬較小,需要兩個(gè)時(shí)間周期完成數(shù)據(jù)的傳輸。NetO在整體鏈路上找到另外一條冗余帶寬(藍(lán)色鏈路),并提示系統(tǒng)把這個(gè)鏈路利用起來,這個(gè)調(diào)度過程觸發(fā)了流量的再次優(yōu)化分配。原本需要兩個(gè)時(shí)間單位傳輸?shù)臄?shù)據(jù)在這條鏈路上一個(gè)時(shí)間單位就能完成。

以上就是阿里巴巴在雙11中的網(wǎng)絡(luò)智能化技術(shù)及在成本優(yōu)化、流量智能化調(diào)度等方面相關(guān)實(shí)踐的介紹。網(wǎng)絡(luò)智能永遠(yuǎn)是一個(gè)在路上的過程,我們還在不斷努力演進(jìn)它。在未來一段時(shí)間內(nèi),我們會(huì)進(jìn)一步在無人值守、成本優(yōu)化和穩(wěn)定性方面加大投入,給大家呈現(xiàn)更好的東西,帶來更好的用戶體驗(yàn)。

創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎(jiǎng)勵(lì)來咯,堅(jiān)持創(chuàng)作打卡瓜分現(xiàn)金大獎(jiǎng)

總結(jié)

以上是生活随笔為你收集整理的轻松应对双11,百万级物理和虚拟网络设备的网络智能化实践的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。

久久精品欧美视频 | bayu135国产精品视频 | 婷婷六月天天 | 黄色亚洲大片免费在线观看 | 精品国产乱码久久久久久1区2匹 | 日韩久久午夜一级啪啪 | 在线国产激情视频 | 国产69精品久久99的直播节目 | 久久国内精品99久久6app | 亚洲精品国产精品国自产 | 美女视频黄免费网站 | 中文字幕在线播放第一页 | 亚洲综合激情五月 | 天天干天天干天天色 | 久久99亚洲精品久久 | 人人澡人人添人人爽一区二区 | 在线电影91 | 久久精品香蕉视频 | 国产视频一区二区三区在线 | 高清av免费一区中文字幕 | av 一区 二区 久久 | 五月婷婷综合色拍 | 中文字幕免费观看视频 | 在线观看亚洲国产 | 国产美女无遮挡永久免费 | 国产精品第52页 | 成人av影院在线观看 | 免费福利视频导航 | 综合久久网站 | 久久艹久久 | 中文字幕免费观看全部电影 | www最近高清中文国语在线观看 | 日本中文字幕网 | 在线免费观看视频你懂的 | 国产偷国产偷亚洲清高 | 九九三级毛片 | 欧美性护士 | 91久久黄色 | 美女视频是黄的免费观看 | 一二三区av| 国产精品一区二区三区在线看 | 蜜桃视频日本 | 欧美另类巨大 | 欧美一级欧美一级 | 婷婷综合 | 日韩乱码在线 | 亚洲在线看 | 免费观看国产精品视频 | 米奇四色影视 | 国产精品理论片在线播放 | 日韩午夜在线观看 | 精品国产免费观看 | 久草视频国产 | 国产专区欧美专区 | 97视频久久久| 亚洲精品视频偷拍 | 国产理论一区二区三区 | 1024手机在线看 | 久久影视精品 | 国外成人在线视频网站 | 91传媒视频在线观看 | 91丨九色丨国产丨porny精品 | 亚洲精品小区久久久久久 | 久草视频首页 | 国产理论在线 | 美女网站在线免费观看 | 亚洲综合欧美精品电影 | 日韩久久激情 | 碰超在线 | 久久国产精品久久久 | 超碰国产在线播放 | 午夜精品一二区 | 91在线视频在线观看 | 在线免费国产视频 | 亚洲黄色免费在线 | av播放在线 | 久久久久亚洲精品成人网小说 | 久久精品国产亚洲精品 | 亚洲人成在线电影 | 久久久久久国产精品亚洲78 | 国产在线1区 | 中文字幕第一页在线 | 亚洲日本韩国一区二区 | 亚洲婷婷网 | 一区二区三区日韩在线 | 五月婷婷av | 综合久久网站 | 五月天丁香亚洲 | 亚洲六月丁香色婷婷综合久久 | 国产黄视频在线观看 | 成人黄色影片在线 | 伊人婷婷网 | 国产美女精品视频 | 99人久久精品视频最新地址 | 久久久久免费精品国产 | 久久久国产成人 | 天天射天 | 色在线最新| 久久香蕉影视 | 黄色网在线免费观看 | 日韩在线 一区二区 | 五月天中文字幕mv在线 | 久久国产精品电影 | 成人国产精品久久久久久亚洲 | 一区二区三区四区精品视频 | 久草免费电影 | 黄污视频网站大全 | 激情婷婷综合网 | 99久久精品国产系列 | 亚洲乱亚洲乱亚洲 | 免费观看丰满少妇做爰 | 免费a v在线 | 国产精品一区二区精品视频免费看 | 国产欧美中文字幕 | 成人久久久久久久久久 | 91污视频在线| 国产夫妻av在线 | 麻豆精品视频在线 | 91污在线观看 | 91精品国产自产在线观看永久 | 中文字幕日韩在线播放 | 亚洲热视频 | 国产精品伦一区二区三区视频 | 日本久久久精品视频 | 中文字幕一区二区三区在线视频 | 又爽又黄又无遮挡网站动态图 | 韩国一区二区三区视频 | 国产99久久精品一区二区永久免费 | 久草在线观 | 久草资源在线观看 | 2023亚洲精品国偷拍自产在线 | 视频在线观看一区 | 99国内精品久久久久久久 | jizz999| 免费在线国产精品 | 在线国产福利 | 正在播放一区二区 | 日韩乱码中文字幕 | 91精品一区二区三区蜜臀 | 欧美日韩在线电影 | 在线高清一区 | 五月婷婷丁香网 | 久久最新视频 | 亚州成人av在线 | 嫩嫩影院理论片 | 亚洲精品资源在线 | 久久tv| 日本女人的性生活视频 | 国产精品2019 | 日本性高潮视频 | 日日久视频 | 国产福利一区二区三区视频 | av免费黄色 | 国产一在线精品一区在线观看 | 一本一道波多野毛片中文在线 | 久久精品亚洲精品国产欧美 | av先锋影音少妇 | 亚洲视频电影在线 | 91一区啪爱嗯打偷拍欧美 | 久久久久久久久影院 | 91免费视频黄 | www.在线看片.com | 国产在线精 | 日日干日日操 | 免费成人黄色av | 国产又粗又猛又色 | 国色天香在线观看 | 欧美成人在线免费观看 | 欧美激情视频在线观看免费 | 日韩精品在线视频 | 久久久久麻豆 | 久久不射电影院 | 国内精品视频免费 | 激情五月婷婷激情 | 日韩中文字幕免费在线观看 | 亚洲精品国产区 | 亚洲少妇自拍 | 天天综合人人 | 日韩毛片在线一区二区毛片 | 久久只精品99品免费久23小说 | 久久久久免费电影 | 伊人久久电影网 | 91精品国产92久久久久 | 国模视频一区二区 | 激情五月婷婷激情 | 中文字幕在线观看日本 | 麻豆91视频 | va视频在线观看 | 麻豆国产网站 | 中文字幕在线观看国产 | 亚洲国产婷婷 | 国产色网站 | 91亚洲免费| 国产精品18久久久久久久久久久久 | 日韩av一区二区三区在线观看 | 亚洲国产中文字幕在线观看 | 国产精品1区2区3区在线观看 | 亚洲人成免费 | 欧美人zozo | 国模吧一区 | 国产精品中文字幕在线观看 | 黄色av三级在线 | 射综合网| 天天色天天射天天操 | 精品久久久免费 | 日韩在线视频网址 | 日韩爱爱片 | 久久欧美在线电影 | 久久免费看a级毛毛片 | 夜添久久精品亚洲国产精品 | 91香蕉国产 | 精品国产欧美一区二区三区不卡 | 国产精品久久网站 | 久久久久日本精品一区二区三区 | 麻豆果冻剧传媒在线播放 | 精品一区二区三区四区在线 | av片一区| 久久久免费网站 | 99在线观看精品 | 国产1级视频 | 免费福利在线 | 亚洲成人av在线 | 蜜臀av性久久久久蜜臀aⅴ四虎 | 最新精品视频在线 | 国产精品99爱 | 97精品超碰一区二区三区 | av免费看在线 | 国产一级二级三级视频 | 成年人黄色在线观看 | 国产在线精品播放 | 免费黄色av片| 日本视频精品 | 精品国产自在精品国产精野外直播 | 国产精品久久久久久久久久白浆 | 国产日韩精品一区二区三区在线 | 曰韩精品| 日韩免费一二三区 | 不卡av电影在线观看 | 亚洲一本视频 | 四虎影院在线观看av | 精品国产乱子伦一区二区 | 99久久一区 | 久草在线在线视频 | 国产精品色婷婷 | 成人av片免费观看app下载 | 激情av一区二区 | 久操操 | 天堂在线成人 | 九九视频精品在线 | 中文字幕乱码电影 | 玖玖色在线观看 | 国产精品网红直播 | 国产视频中文字幕在线观看 | 丁香六月在线 | 丁香视频 | 超碰在线人人艹 | 日女人电影 | 黄色一级大片在线免费看国产一 | 五月天婷婷综合 | 一级黄色大片 | 欧美另类重口 | 国产高清久久久 | 深爱激情av | 中文字幕人成不卡一区 | 亚洲狠狠丁香婷婷综合久久久 | 中文字幕婷婷 | 久久精品精品电影网 | 天天操天天射天天添 | 国产毛片久久 | 十八岁免进欧美 | 97**国产露脸精品国产 | 91香蕉嫩草 | 免费看wwwwwwwwwww的视频 久久久久久99精品 91中文字幕视频 | 最新中文字幕 | 久久中文字幕在线视频 | 日韩免费av片 | 久久精品第一页 | 99中文字幕在线观看 | 最近中文字幕完整高清 | 成人作爱视频 | 男女男视频 | 麻豆激情电影 | 国产精品18久久久久久久网站 | 五月天电影免费在线观看一区 | 一区二区三区在线视频111 | 99av在线视频 | 丁香花中文在线免费观看 | 国产在线污 | 西西4444www大胆艺术 | 精品久久国产 | 国产不卡高清 | 日本午夜免费福利视频 | 97超碰人人| 操综合 | 精品色999 | www.干| 久久影院中文字幕 | 青青河边草观看完整版高清 | 人人射人人射 | 中文字幕日韩国产 | aaawww| 免费看一级黄色大全 | 亚洲妇女av| 日日夜夜人人天天 | 久久视讯| 国产精品亚洲综合久久 | 精品在线观看一区二区 | 胖bbbb搡bbbb擦bbbb | 国产亚洲在线视频 | 亚洲一区视频免费观看 | 色视频网址 | 色综合久久天天 | 黄网站色视频免费观看 | 国产成人福利在线观看 | 91自拍视频在线观看 | 黄视频色网站 | 69国产成人综合久久精品欧美 | av福利在线| 黄色免费电影网站 | av福利在线 | 日韩成人精品在线观看 | 91在线免费公开视频 | 婷婷国产一区二区三区 | 伊人成人精品 | 色综合天天狠狠 | 在线91av| 91亚洲欧美 | 国产精品手机在线 | 成年人黄色免费看 | 国产免费久久精品 | 日韩中文字幕免费 | 国产精品久久久久久一区二区三区 | 高清有码中文字幕 | 欧美一级激情 | 精品久久久99 | 91尤物国产尤物福利在线播放 | 天天色欧美 | 在线观看免费视频 | 日韩av一区在线观看 | 欧美精品久久久久久 | 中文字幕在线专区 | www.午夜视频 | 国产v视频| 日日夜夜天天久久 | 手机在线观看国产精品 | 久久久精品小视频 | av在观看 | 欧美91精品国产自产 | 五月天欧美精品 | 久久久久久久久久久久av | 中文字幕免费不卡视频 | 免费91在线 | 黄色av免费 | 黄色免费观看视频 | 91精品啪在线观看国产线免费 | 国产91精品久久久久 | 国产麻豆精品免费视频 | 婷婷在线观看视频 | 欧美日韩国产精品一区二区 | 午夜av免费观看 | 嫩草av在线 | 国产精品成人久久 | 欧美午夜理伦三级在线观看 | 超碰.com| 欧美日韩午夜在线 | 国产色婷婷精品综合在线手机播放 | 色综合人人 | 国产精品免费人成网站 | 免费在线播放av电影 | 99精品国产一区二区三区麻豆 | 亚洲视频2 | 99色视频 | 黄色免费看片网站 | 最近中文字幕国语免费av | 免费国产黄线在线观看视频 | 黄色电影在线免费观看 | 视频在线观看91 | 日韩高清一区在线 | 天天天天综合 | 成人久久久久久久久久 | 欧美一区二区三区四区夜夜大片 | 99免费精品 | 91视频链接 | 欧美激情精品久久久久久变态 | 麻豆一二 | 91视频91蝌蚪 | 97色免费视频 | 久久99精品一区二区三区三区 | 日韩婷婷 | 天天草天天爽 | 精品久久久久免费极品大片 | 欧美激情视频一区 | 色大片免费看 | 亚洲成年人在线播放 | 国产美女视频一区 | 亚洲欧美日韩国产一区二区 | 97香蕉久久超级碰碰高清版 | 中文字幕在线观看网址 | 91亚洲国产成人久久精品网站 | 9色在线视频| 欧美日韩国产高清视频 | 伊人天天| 99久久久国产精品美女 | 国产精品久久久久av福利动漫 | 国产亚洲在线 | 黄色一级大片在线免费看产 | 国产精品美女久久久久久久久久久 | 亚洲国产精久久久久久久 | 久久久免费精品视频 | 成人在线视频免费观看 | 婷婷综合视频 | 蜜臀aⅴ国产精品久久久国产 | 99久久综合精品五月天 | 亚洲黄色一级视频 | 99色在线观看视频 | 亚洲精品视频网站在线观看 | 天天色天天色 | 中文字幕乱码亚洲精品一区 | 国产女人40精品一区毛片视频 | 一区二区 精品 | 欧美在线观看视频一区二区 | 五月天激情婷婷 | 日本精品久久久久久 | 伊人五月在线 | 国产精品黑丝在线观看 | 国产精品综合久久久久久 | 日韩免费大片 | 91在线精品一区二区 | 超碰日韩在线 | 色婷婷骚婷婷 | 97国产情侣爱久久免费观看 | 2021国产精品视频 | 久久久久一区二区三区四区 | 日韩美精品视频 | 亚洲欧洲日韩在线观看 | 色欧美视频| 中文字幕在线播放视频 | 91精品国产综合久久福利不卡 | 久久视频这里有久久精品视频11 | 人人狠狠综合久久亚洲 | 天堂中文在线播放 | 国产亚洲免费观看 | 国产精品亚洲片在线播放 | 国产在线观看黄 | 午夜美女av| 久久久网址 | 伊人影院在线观看 | 欧美一区二区三区特黄 | 国产一级不卡毛片 | 一区二三国产 | 国产一区视频免费在线观看 | 色综合五月天 | 色婷婷播放 | 欧美va天堂va视频va在线 | av超碰在线 | 欧美日韩天堂 | 在线观看精品一区 | www.久久婷婷 | 五月婷婷丁香综合 | av高清网站在线观看 | 91精品久久久久久综合五月天 | 天天操网址| 一二三精品视频 | 婷婷在线资源 | 射射色| 啪嗒啪嗒免费观看完整版 | 黄色影院在线免费观看 | 狠狠躁日日躁夜夜躁av | 成人a免费视频 | 亚洲国产中文字幕在线观看 | 草在线 | 丁香六月天婷婷 | 国产精品国产三级国产不产一地 | 欧美成人精品在线 | 国产99久久久国产精品成人免费 | 在线视频福利 | 日本免费一二三区 | 国产不卡一区二区视频 | 在线看一级片 | 色诱亚洲精品久久久久久 | 成人毛片在线观看 | 免费a级大片 | 又爽又黄又刺激的视频 | 欧美国产精品一区二区 | 国产一级淫片免费看 | 激情综合婷婷 | 激情丁香综合五月 | 免费成人在线观看 | 蜜桃视频在线观看一区 | 成人黄色在线看 | 国产一级在线 | 成人免费视频在线观看 | 国产中文字幕在线观看 | 欧美一级久久 | 91黄色在线看 | 麻豆视频国产 | 在线视频观看亚洲 | 中文字幕在线观看一区二区三区 | 午夜天使| 欧美日韩国产页 | .国产精品成人自产拍在线观看6 | 国产精品一区二区白浆 | 最新国产精品视频 | 日韩在线观看网址 | 欧美另类xxxxx | 色中文字幕在线观看 | 波多野结衣电影一区二区 | 国产成人精品久久久久蜜臀 | 国产一区二区在线免费播放 | av网站大全免费 | 九草在线视频 | 久久精品a| 超碰在线最新网址 | 久久国产精品99国产精 | 免费观看视频的网站 | 激情一区二区三区欧美 | 激情丁香综合五月 | 黄av免费 | 99久久99热这里只有精品 | av福利在线免费观看 | 国产玖玖在线 | 狠狠的干 | 99国产精品一区二区 | 成年人黄色免费视频 | 久久久久国产精品视频 | 中文字幕一区二区三 | 日韩高清精品免费观看 | 欧美在线视频精品 | 肉色欧美久久久久久久免费看 | 日本性生活免费看 | 91视频免费看| 欧美性做爰猛烈叫床潮 | 亚洲一区日韩在线 | 黄色小说免费在线观看 | 五月婷婷综合在线观看 | 国产日产欧美在线观看 | 51久久成人国产精品麻豆 | 在线观看黄色 | 99免费在线播放99久久免费 | 日韩av中文 | 天天摸夜夜操 | 国产在线精品一区 | 青青久草在线视频 | 国产91九色蝌蚪 | 日韩欧美高清在线观看 | 亚洲视频专区在线 | 视频在线99re | 青青草国产免费 | 精品一区 在线 | 在线中文字幕一区二区 | 久久99精品久久久久久清纯直播 | 在线国产日本 | 最近2019中文免费高清视频观看www99 | 国产精品免费观看国产网曝瓜 | 精品福利在线 | av片在线看 | 国产黄色片久久 | 免费观看成人网 | 国产成人一区二区三区 | 亚洲一区免费在线 | 中文字幕第一页在线vr | 欧美在线观看视频 | 999热视频| 免费激情在线电影 | 欧美激情视频一区二区三区 | 狠狠撸电影 | 在线观看精品一区 | h文在线观看免费 | 亚洲人成免费 | 色播五月激情五月 | 婷婷射五月 | 久久综合射| 国产97在线观看 | 一级片视频免费观看 | 四虎在线影视 | 亚洲精品动漫成人3d无尽在线 | 国产成人综| 亚洲精品乱码久久久久久久久久 | 97视频在线免费 | 少妇性色午夜淫片aaaze | av国产在线观看 | 国产黄色精品在线 | 日本爱爱免费 | 精品视频在线免费 | 激情影音先锋 | 永久免费av在线播放 | 欧美一级黄大片 | 99精品在线免费视频 | 色黄www小说 | 欧美天天干 | 欧美成年网站 | 国产资源在线免费观看 | 午夜视频在线观看欧美 | 日韩av电影一区 | 在线观看国产www | 精品国产一区二区三区噜噜噜 | 国产精品国产三级国产aⅴ入口 | 国产精品久久久久永久免费看 | 国产精品福利无圣光在线一区 | 99久久日韩精品免费热麻豆美女 | 天天干 夜夜操 | 日韩三级在线 | 亚洲精品在线播放视频 | av网站在线观看播放 | 欧美精品在线观看免费 | 国产精品露脸在线 | 成年人黄色av | 国产精品久久久久三级 | 蜜臀久久99静品久久久久久 | 天天摸天天操天天舔 | 免费91在线 | 久草视频中文在线 | 在线观看免费福利 | 欧美精品久久久久久久久久白贞 | 国产手机在线视频 | av成人亚洲 | 婷婷综合激情 | 久久国产亚洲 | 日韩大片在线播放 | 久草91视频 | 超碰在线97国产 | 国产成人精品日本亚洲999 | 久久激情影院 | 色偷偷88888欧美精品久久 | 国产中文字幕在线免费观看 | 欧美日韩电影在线播放 | 免费精品人在线二线三线 | 久久免费公开视频 | 国产精品嫩草55av | 国产小视频免费在线网址 | 99久久国产免费看 | 日韩精品高清不卡 | 久久手机视频 | 免费视频99 | 九九免费在线观看 | 在线观看日本高清mv视频 | 97在线观看免费视频 | 色 免费观看 | 婷婷社区五月天 | 香蕉在线视频播放网站 | 成年人在线看片 | 天天做日日做天天爽视频免费 | 激情婷婷综合网 | 日韩免费在线视频观看 | 波多野结衣久久精品 | 五月天久久久久 | 亚洲成人av影片 | 亚洲精品成人av在线 | 国产亚洲视频中文字幕视频 | 国产精品久久久久久久av大片 | 91精品国产99久久久久 | 色婷在线 | 久久久久久97三级 | 日本天天色 | 99久久99久久精品国产片果冰 | 一区二区三区国 | 亚洲欧洲精品视频 | 国产三级午夜理伦三级 | 999在线视频 | 超碰免费观看 | 亚洲欧洲av在线 | 91免费观看视频在线 | 精品亚洲免费 | 色.com| 青春草免费视频 | 国产色婷婷精品综合在线手机播放 | 黄污在线观看 | 91亚洲精品在线观看 | 欧美午夜a | 激情综合狠狠 | av丝袜制服 | 伊人影院99| 中国一 片免费观看 | 久久看看| 欧美va天堂va视频va在线 | 一区二区三区免费在线播放 | 天天色影院 | 久久久在线视频 | 在线看不卡av | 中文字幕在线观看一区二区 | www日韩在线 | 国产精品久久一区二区三区, | 国产69精品久久久久久久久久 | 99久久精品午夜一区二区小说 | 久久伊人操 | 国产一区在线观看免费 | 国产精品久久久久久一二三四五 | 91亚色在线观看 | 日韩免费精品 | 鲁一鲁影院 | 天天干天天操天天入 | 日韩av二区 | 在线视频精品 | 日本久久久久久久久 | 91成人免费在线 | 91国内在线 | 992tv在线| 久久草| 欧美黑吊大战白妞欧美 | 国产 在线 高清 精品 | 欧美精选一区二区三区 | 久香蕉 | 精品一区二区视频 | 91av欧美| 五月婷婷视频 | 黄色三级免费 | 天天爽综合网 | 久久男人中文字幕资源站 | 91精品国产92久久久久 | 五月天狠狠操 | www夜夜操| 九九精品视频在线观看 | 在线导航福利 | 999在线视频 | 国产精品 999 | 日韩欧美aaa | 天天色天天操综合 | 国精产品永久999 | 亚洲一级久久 | 91精品啪啪 | 日韩欧美精品在线观看视频 | 99综合影院在线 | 在线播放 日韩专区 | 正在播放一区 | 精品久久福利 | 在线视频app | 五月导航| 99久久精品国产欧美主题曲 | 久久久精品 | 欧美国产精品久久久久久免费 | 免费激情在线电影 | 精品久久一区二区 | 欧美精品在线观看免费 | www日韩精品| av三级在线免费观看 | 最近免费中文字幕 | 欧美久久久久久久久久 | 97超碰超碰久久福利超碰 | 在线观看日韩 | 91女人18片女毛片60分钟 | 91精品国产一区二区三区 | 国产视频欧美视频 | 国产精品av在线 | 91精品国产自产在线观看 | 三级在线国产 | 久久久久免费观看 | 成人av午夜 | 久久久久国产精品免费网站 | 免费在线观看黄色网 | 国产剧情久久 | 国产粉嫩在线观看 | 中文字幕成人一区 | 国产99色 | 91av资源在线 | 狠狠做六月爱婷婷综合aⅴ 日本高清免费中文字幕 | 九色琪琪久久综合网天天 | 欧美日韩调教 | 色视频网址 | 91在线免费观看网站 | 亚洲另类久久 | 人人草在线观看 | 久久艹在线观看 | 欧美日韩三区二区 | 久久精品国产美女 | 国产另类av | 亚洲欧洲成人精品av97 | 黄色av一区 | 国产精品久久久久久一区二区三区 | 色婷婷综合成人av | 免费色网 | 免费在线播放av电影 | 国产精品自产拍在线观看中文 | 婷婷狠狠操 | 最新日韩精品 | 国产免费叼嘿网站免费 | 日韩欧美视频免费在线观看 | 成人97视频一区二区 | 国产精品免费在线观看视频 | 看av免费| 91九色丨porny丨丰满6 | 日韩亚洲在线视频 | 五月婷婷丁香网 | 91av福利视频| 久久伦理 | av一级二级 | 在线观看mv的中文字幕网站 | 999毛片| 日韩精品影视 | 久久超碰99| 国产精品欧美久久久久久 | 久久欧美在线电影 | 在线天堂8√ | 最近中文字幕视频网 | 狠狠操精品 | 日韩一区二区免费播放 | 国产午夜精品免费一区二区三区视频 | 在线看片91| 国际精品久久久 | 中文字幕 国产专区 | 国产精品久久久影视 | 亚洲成a人片77777潘金莲 | 中文字幕av在线不卡 | 亚洲aⅴ一区二区三区 | 男女视频国产 | 激情五月看片 | 久久婷婷五月综合色丁香 | 色夜视频 | 久久成人视屏 | 亚洲人天堂 | 色综合天天综合网国产成人网 | 中文伊人 | 国产亚洲精品免费 | 一级免费黄视频 | 久久国产精品影片 | 中文超碰字幕 | 亚洲无吗视频在线 | 天天射天天射 | 婷婷精品视频 | 亚洲一区在线看 | 国产精品永久免费观看 | 91精品1区2区 | av经典在线 | 天天天天爽| 国产网红在线 | 国内免费久久久久久久久久久 | 午夜精品在线看 | 中文字幕在线观看2018 | 女人18毛片a级毛片一区二区 | 99久久99久久综合 | 日韩午夜剧场 | 欧美亚洲久久 | 综合激情网 | 国产又粗又硬又爽视频 | 国产99久久久国产精品免费二区 | 啪啪肉肉污av国网站 | 九色免费视频 | 日日夜夜天天久久 | 国产美女免费观看 | 91看片看淫黄大片 | 一级免费av | 91久久黄色 | 成人黄色av免费在线观看 | 日韩videos| 又爽又黄又无遮挡网站动态图 | 天天综合网天天综合色 | 激情五月在线视频 | 黄色的网站免费看 | 日韩视频精品在线 | 人人看人人爱 | 亚洲专区在线播放 | 国产一级片不卡 | 免费又黄又爽 | 91久久国产综合精品女同国语 | 99在线精品免费视频九九视 | 亚洲黄色av| 成人午夜剧场在线观看 | 亚洲最新av在线网址 | 日韩av电影免费观看 | 国产自产高清不卡 | 国产精品 中文字幕 亚洲 欧美 | 国产99视频在线观看 | 亚洲欧美日韩一区二区三区在线观看 | 狠狠操91| 国产传媒中文字幕 | 欧美一级在线看 | 久草成人在线 | 欧美日韩在线视频免费 | 粉嫩av一区二区三区四区五区 | 日日夜夜天天 | 成人av地址 | 黄色av电影网 | 视频在线99re | 久久精品国产免费 | 国产一级二级三级视频 | www.五月天婷婷 | 毛片网站在线观看 | 日韩二区在线观看 | 天天干天天操 | 久久国产精品99久久久久久丝袜 | 国产黄色一级片在线 | 国产精品美女网站 | 亚洲免费不卡 | 国产剧情一区二区在线观看 | 日韩欧美视频免费观看 | av资源中文字幕 | 久久99精品国产麻豆婷婷 | 在线小视频你懂得 | 欧洲精品久久久久毛片完整版 | 中文视频在线 | 一区二区三区不卡在线 | 国产精品 中文字幕 亚洲 欧美 | 色偷偷av男人天堂 | 国产精品久久久久久久av大片 | 国产午夜精品久久久久久久久久 | 日韩小视频网站 | 一区二区三区中文字幕在线观看 | 精品91久久久久 | a级国产乱理伦片在线观看 亚洲3级 | 久久色视频 | 91精品伦理| 丁香在线视频 | 开心色停停 | 一区二区三区高清在线观看 | 九九视频免费观看视频精品 | 成人一区二区三区中文字幕 | 99久久婷婷国产综合亚洲 | 九色91av | 99久久精品国产免费看不卡 | 日韩一片| 99精品欧美一区二区三区 | 欧美性免费 | 99在线免费视频观看 | 亚洲欧美日韩一二三区 | 久久草在线免费 | 一区二区网 | 亚洲一级黄色av | 麻豆久久一区二区 | 久艹在线免费观看 | 九九九毛片 | 国产自产在线视频 | 日韩久久网站 | 91丨九色丨蝌蚪丨老版 | 日韩免费看 | 国产一级不卡视频 | 丁香花中文字幕 | 手机成人在线电影 | 天天射天天干天天爽 | 日韩欧美高清一区二区三区 | 亚洲视频国产 | 成 人 黄 色视频免费播放 | 日韩视频一区二区在线 | 成年人视频在线观看免费 | 国产精品对白一区二区三区 | 91最新网址在线观看 | 久久噜噜少妇网站 | 干干操操 | 又黄又刺激 | 五月综合激情婷婷 | 麻豆 free xxxx movies hd | 国产人成精品一区二区三 | 国产一区高清在线观看 | 97在线观看视频 | 国产在线91精品 | 三级在线国产 | 久久久免费播放 | 成人在线视频免费 | 天天看天天干 | 亚洲aⅴ一区二区三区 | 欧美性脚交 | 999精品网| 久久99精品国产一区二区三区 | 亚洲天堂激情 | 久久久久久久久久网 | 99久久成人 | 久久久精品成人 | 天天操操操操操 | 在线免费观看不卡av | 亚洲精品裸体 | 免费h漫在线观看 | 久久人人爽人人爽人人片av软件 | 中文字幕高清在线播放 | 国产高清精品在线观看 | 亚洲成人软件 | 99视频在线精品 | 精品国产1区2区3区 国产欧美精品在线观看 | 婷婷狠狠操 | 欧美一区二区在线 | 中文字幕你懂的 | 亚洲免费不卡 | 色七七亚洲影院 | 91成人精品一区在线播放69 | 97视频在线观看播放 | 91精品视频免费看 | 国产精美视频 | 精品一区二区av | 97电影网手机版 | 粉嫩av一区二区三区四区在线观看 | 久久久国产精品亚洲一区 | 国产不卡在线视频 | 91片网 | 婷婷在线精品视频 | 狠狠狠狠狠狠狠 | av一级网站| 伊人天天操 | 免费在线观看av不卡 | 亚洲国产一区在线观看 | 成年人免费看片网站 | 亚洲精品国久久99热 | 永久免费视频国产 | 免费在线国产 | 在线免费黄色av | 久久国产成人午夜av影院潦草 | 麻豆国产露脸在线观看 | 丁香午夜婷婷 | 国产一区免费在线观看 | 国产一区播放 | 婷婷 中文字幕 | 欧美色久 |