日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

The Road to SDN: An Intellectual History of Programmable Networks

發布時間:2025/3/14 编程问答 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 The Road to SDN: An Intellectual History of Programmable Networks 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
  • 文章名稱:The Road to SDN: An Intellectual History of Programmable Networks
  • 文章來源:Feamster N , Rexford J , Zegura E . The Road to SDN[J]. Queue, 2013, 11(12):20-40.

ABSTRACT:

軟件定義網絡(SDN)是一項令人興奮的技術,它使我們能夠創新設計和管理網絡,盡管這項技術似乎是突然出現的,但SDN是使計算機網絡更具可編程性的長期努力的一部分。本文追溯了可編程網絡(包括主動網絡)的發展歷史,早期分離控制和數據平面的努力,以及最近在OpenFlow和網絡操作系統方面的工作。我們強調關鍵概念,以及推動每項創新的技術推動和應用拉動。在此過程中,我們揭穿了關于這些技術的常見神話和誤解,并澄清了SDN與網絡虛擬化等相關技術之間的關系

1. Introduction:

算機網絡復雜且難以管理,這些網絡有很多種設備,從路由器和交換機到防火墻、網絡地址轉換器、服務器負載均衡器和入侵檢測系統等中間盒。路由器和交換機運行復雜的分布式控制軟件,通常是封閉和專有的,實現了經過多年標準化和互操作性測試的網絡協議。網絡管理員通常使用不同供應商甚至同一供應商的不同產品的配置接口來配置單個網絡設備,盡管一些網絡管理工具為配置網絡提供了一個中心優勢,但這些系統仍然在各個協議、機制和配置接口的級別上運行。這種運營模式減緩了創新速度,增加了復雜性,并抬高了運營網絡的資本和運營成本。

軟件定義網絡(SDN)正在改變我們設計和管理網絡的方式。

SDN有兩個定義特征。首先,SDN將控制平面(決定如何處理流量)與數據平面(根據控制平面所做的決定轉發流量)分離。其次,SDN合并控制平面,這樣一個軟件控制程序就可以控制多個數據平面元素。SDN控制平面通過定義良好的應用程序編程接口(API)對網絡數據平面元素(即路由器、交換機和其他中間盒)中的狀態進行直接控制。

OpenFlow就是這樣一個API的突出例子。OpenFlow交換機有一個或多個數據包處理規則表,每個規則匹配一個子集的流量,并對與規則匹配的流量執行某些操作,包括丟棄、轉發或泛洪。根據控制器應用程序安裝的規則,OpenFlow交換機的行為可以類似于路由器、交換機、防火墻、網絡地址轉換器或介于兩者之間的東西。

在過去的幾年里,SDN在工業界獲得了巨大的吸引力——許多商業交換機支持OpenFlow API。最初支持OpenFlow的供應商包括HP、NEC和Pronto,此后這個列表急劇擴展,并且出現了許多不同的控制器平臺。程序員使用這些平臺創建了許多應用程序,如動態訪問控制、服務器負載平衡、網絡虛擬化、節能網絡、無縫虛擬機遷移和用戶移動。早期的商業成功,如谷歌的廣域交通管理系統和Nicira的網絡虛擬化平臺,已經引起了業界的極大關注。世界上最大的信息技術公司(例如云提供商、運營商、設備供應商和金融服務公司)加入了SDN行業聯盟,如開放式網絡基金會和Open Daylight方案。

盡管在過去的幾年中,人們對SDN的興奮已經變得更加明顯,但SDN背后的許多想法都是在過去的二十年(或更長時間)里發展起來的。在某些方面,SDN重新考慮了早期電話網絡的想法,該網絡使用控制和數據平面的明確分離來簡化網絡管理和新服務的部署。然而,像OpenFlow這樣的開放接口使得控制器平臺和應用程序的創新比為狹窄的電話服務范圍而設計的封閉網絡的創新更多。在其他方面,SDN類似于過去對主動網絡的研究,它闡述了可編程網絡的愿景,盡管重點是可編程數據平面,SDN還涉及到以前在計算機網絡中分離控制平面和數據平面的工作。

在這篇文章中,我們展示了可編程網絡的知識歷史,最終形成了今天的SDN。我們捕捉到了關鍵思想的演變、當今的應用“拉動”和技術“推動”,以及有助于指導下一組SDN創新的經驗教訓。在此過程中,我們揭穿了關于每一項技術的神話和誤解,并澄清了SDN與相關技術(如網絡虛擬化)之間的關系。我們的歷史始于20年前,就在互聯網騰飛之際,互聯網驚人的成功加劇了管理和發展網絡基礎設施的挑戰。我們專注于網絡社區的創新(無論是研究人員、標準機構還是公司),盡管我們認識到,在某些情況下,這些創新是由其他領域的進步推動的,包括分布式系統、操作系統和編程語言,創建可編程網絡基礎設施的努力也顯然與支持高速可編程分組處理的長線程有關。

在我們開始我們的故事之前,我們提醒讀者,任何歷史都是不完整的,比單一的故事情節可能暗示的更微妙。特別是,我們在本文中描述的大部分工作都是在使用術語“SDN”之前完成的,該術語是在一篇關于斯坦福OpenFlow項目的文章中創造的。術語“SDN”的詞源本身就很復雜,盡管該術語最初用于描述斯坦福的OpenFlow項目,但此后該定義擴展到包括更廣泛的一系列技術(這個詞有時甚至被行業營銷部門用來描述史丹福SDN項目之前不相關的想法)。因此,我們沒有試圖將項目之間的直接影響歸因于項目之間,而是強調了想法的演變和想法之間的關系。它們代表了SDN的定義特征,不管它們是否直接影響到特定的后續研究,這些早期的一些想法可能沒有直接影響到后來的想法,但我們認為,我們所概述的概念之間的聯系是值得注意的,過去的這些項目可能會為未來的可持續發展網絡提供新的教訓

2. The Road to SDN:

業界的目標是使計算機網絡更具可編程性有助于網絡管理的創新,并降低部署新服務的障礙。在本節中,我們將回顧可編程網絡的早期工作,將歷史分為三個階段,如圖1所示。

每個階段對歷史都有自己的貢獻:

  • (1)主動網絡(從20世紀90年代中期到21世紀初),它在網絡中引入了可編程功能,以實現更大的創新
  • (2)控制和數據平面分離(從2001年到2007年左右),開發了控制和數據平面之間的開放接口
  • (3)OpenFlow API和網絡操作系統(2007年至2010年左右),代表了廣泛采用開放接口的第一個實例,并開發了使控制數據平面分離具有可擴展性和實用性的方法。

網絡虛擬化在SDN的歷史演進過程中扮演著重要的角色,它在SDN出現之前就已經有了實質性的發展,但作為SDN最早的重要用例之一,網絡虛擬化已經扎根于SDN之上。我們在第3節討論了網絡虛擬化及其與SDN的關系。

2.1 Active Networking

20世紀90年代初到中期,互聯網蓬勃發展,其應用及吸引力遠遠超過了早期的文件傳輸和科學家電子郵件應用程序,更多樣化的應用程序和更廣泛的公眾使用,吸引了渴望測試和部署改進網絡服務的新想法的研究人員。為此,研究人員在小型實驗室環境中設計并測試新的網絡協議,并在大型網絡上模擬行為,如果動機和資金持續存在,他們會將想法提交給互聯網工程特別工作組(IETF)以使這些協議標準化。

標準化過程緩慢,最終使許多研究人員感到沮喪。于是,一些網絡研究人員采用了一種開放網絡控制的替代方法,大致是基于對獨立PC重新編程相對容易的類比。具體地說,傳統網絡在任何意義上都不是“可編程”的,主動網絡代表了一種激進的網絡控制方法,通過設想一個編程接口(或網絡api)來公開各個網絡節點上的資源(例如,處理、存儲和數據包隊列),并支持構建應用于子集的定制功能。這種方法遭到許多互聯網社區人士的憎恨,他們主張網絡核心的簡單性對互聯網的成功至關重要。

主動網絡研究計劃探索了傳統互聯網協議棧通過IP或異步傳輸模式(ATM)提供服務的根本替代方案,ATM是20世紀90年代早期的另一種主要網絡方式。leanslate網絡架構方法隨后在美國的GENI(網絡創新的全球環境)和NSF Find(未來互聯網設計)和歐洲的EU Fire(未來互聯網研究和實驗倡議)等項目中進行。

歐洲聯盟——活躍的網絡社區追求兩種編程模式:

  • 膠囊模型,其中在節點處執行的代碼在數據包中的帶內攜帶
  • 可編程路由器、交換機模型,其中在節點處執行的代碼由帶外機制建立。

膠囊模型與主動網絡聯系最為密切。膠囊設想在網絡上安裝新的數據平面功能在數據包中攜帶代碼(如先前在分組無線電上的工作[88]),并使用緩存來提高代碼分發的效率而可編程路由器將可擴展性的決定直接交給網絡運營商。

Technology push and use pull

鼓勵主動聯網的“技術推動”包括:

  • 降低計算成本,使其能夠在網絡中投入更多的處理
  • 在諸如Java的編程語言方面提供了平臺可移植性和一些代碼執行安全性
  • 虛擬機技術保護主機,一種保護主機(在本例中是活動節點)和其他進程不受程序錯誤影響的機器技術

一些活躍的網絡研究項目也利用了快速代碼編譯和形式化方法的進步,主動網絡生態系統中的一個重要催化劑是資助機構的利益,特別是美國國防高級研究計劃署(DARPA)從20世紀90年代中期到21世紀初創建和支持的主動網絡計劃。雖然并不是所有主動網絡的研究工作都是由DARPA資助的,但該資助計劃支持了一系列的項目,也許更重要的是,鼓勵了術語和主動網絡組件集的融合,從而使項目能夠為GRE的整個計劃做出貢獻,這個整體的貢獻要大于各個部分的總和。

主動網絡計劃強調演示和項目的互操作性,并依賴著開發工作的水平。在沒有近期使用案例的情況下,一個融資機構的大膽一致的推動也可能導致一定程度的對積極網絡的懷疑,這種網絡通常是健康的,但可能接近敵對狀態,并且可能掩蓋了這項工作以及后來為提供網絡可編程性所做的努力。當時文獻中描述的用于主動網絡的“使用拉”與今天用于激勵SDN的示例非常相似。當前的問題包括網絡服務提供商對開發和部署新的網絡服務(所謂的網絡僵化)所需的時間表感到失望,第三方對增值的興趣,動態滿足特定應用程序或網絡的需求的精細控制。

對于網絡環境,研究人員希望有一個能支持大規模實驗的平臺。此外,許多早期關于主動網絡的論文都提到了包括防火墻、代理和轉碼器在內的中間盒的激增,每一個中間盒都必須單獨部署,并且需要一個不同的(通常是特定于供應商的)編程模型。主動網絡提供了對這些中間盒的統一控制,最終可以取代管理和控制這些中間盒的臨時、一次性方法[74]。

有趣的是,早期的文獻預示了當前網絡功能虛擬化(NFV)的趨勢,這也旨在為具有復雜的中間盒功能的網絡提供一個統一的控制框架。

Intellectual contributions

主動網絡提供了與SDN相關的智慧貢獻。我們特別注意到三個方面:

  • 網絡中的可編程功能,以降低創新的障礙

主動網絡的研究開創了可編程網絡的概念,以此來降低網絡創新的障礙。SDN最初的動機通常是認為在生產網絡中很難創新,并要求增加可編程性,SDN的早期愿景大多集中在控制平面可編程性上,而主動網絡則更多地集中在數據平面可編程性上。也就是說,數據平面的可編程性在控制平面的努力下繼續發展,數據平面的可編程性在新興的NFV計劃中再次走到了前列。

最近有關SDN的工作正在探索SDN協議(如OpenFlow)的演進,以支持更廣泛的數據平面功能。此外,在OpenFlow和其他SDN技術(如FlowVisor)的設計文檔中,將實驗流量與源于主動網絡的正常流量隔離的概念也出現在了前面和中心位置。

  • 網絡虛擬化,以及基于數據包頭對軟件程序進行多路分解的能力

這需要支持多個編程模型的實驗,這導致了對網絡虛擬化的研究。主動網絡產生了一個架構框架,描述了這樣一個平臺的組件,該平臺的關鍵組件是一個管理共享資源的共享節點操作系統(Nodeos),一組執行環境(EES),每個環境定義一個用于數據包操作的虛擬機,以及一組在給定EE中工作以提供端到端服務,將數據包定向到依賴于頭字段的特定EE上的快速模式匹配,和對適當EE的解復用。有趣的是,該模型是在Planetlab體系結構中進行的,根據該體系結構,在虛擬執行環境中運行不同的實驗,數據包在其數據包頭上被解復用到適當的執行環境中。將數據包分解到不同的虛擬執行環境中也被應用于虛擬化可編程硬件數據平面的設計[5]。

  • 為MiddleBox編排提供統一架構的構想

盡管在主動網絡研究計劃中,這一設想從未完全實現,但早期的設計文件指出,需要將廣泛的中間盒功能與通用、安全的編程框架統一起來。盡管這一設想可能沒有直接影響到最近關于NFV的工作,但隨著我們進一步應用基于SDN的控制和協調中間盒,從主動網絡研究中得到的各種教訓可能會被證明是有用的。

Myths and misconceptions

主動網絡包括這樣一個概念,即網絡API將可用于發起和接收數據包的最終用戶,盡管大多數研究界人士認識到,最終用戶網絡程序員將是罕見的。認為數據包必然攜帶最終用戶編寫的Java代碼的錯誤觀念使主動網絡研究與實際網絡相去甚遠,并且本質上不安全,主動網絡在當時也因為無法提供實際的性能和安全性而受到批評。雖然性能并不是主動網絡研究界(專注于架構、編程模型和平臺)的首要考慮因素,但也有一些旨在構建高性能主動路由器的努力。類似地,雖然安全性在許多早期項目中沒有得到充分的解決,但是安全主動網絡環境體系結構項目是一個顯著的例外

In search of pragmatism

盡管主動網絡提出了可編程網絡的設想,但這些技術并未得到廣泛應用,許多因素推動了技術的采用(或缺乏)。可能主動網絡面臨的最大障礙之一是不能立即解決問題或有一個清晰的部署路徑。主動網絡研究工作的一個重要教訓是,數據平面的“殺手級”應用很難想象,社區提供了各種可以從網絡處理中受益的應用,包括信息融合、緩存和內容分發、網絡管理和特定于應用的服務質量。不幸的是,盡管性能優勢可以在實驗室中量化,但這些應用領域中沒有一個能夠充分滿足緊迫需求的解決方案。接下來的工作我們將在下一小節中描述,從他們所解決的問題的范圍來看,是比較溫和的——只關注路由和配置管理。除了范圍更窄之外,下一階段的研究還開發了一些技術,對控制平面和數據平面的功能進行了明確的區分和分離。這種分離最終使人們有可能專注于控制平面的創新,這不僅需要進行重大改革,而且(因為它通常在軟件中實現)比數據平面的創新障礙更低。

2.2 Separating Control and Data Planes

在21世紀初,流量不斷增加,更加強調網絡的可靠性、可預測性,性能導致網絡運營商尋求更好的方法來實現某些網絡管理功能,例如控制用于傳輸流量的路徑(通常稱為流量工程)。使用傳統路由協議執行流量工程的方法充其量是原始的,運營商對這些方法的失望得到了一個小型、位置優越的研究人員社區的認可,他們要么為骨干網絡運營商工作,要么定期與骨干網絡運營商互動。這些研究人員探索了實用的、短期的方法,這些方法要么是標準驅動的,要么是使用現有協議立即部署的。具體來說,傳統路由器和交換機體現了控制和數據平面之間的緊密集成,這種耦合使得各種網絡管理任務,如調試配置問題和預測或控制路由行為,變得非常具有挑戰性。為了應對這些挑戰,各種分離數據和控制平面的努力開始出現。

Technology push and use pull

隨著互聯網在20世紀90年代的蓬勃發展,骨干網的鏈路速度迅速增長,領先的設備供應商直接在硬件上實現包轉發邏輯,獨立于控制平面軟件。此外,互聯網服務提供商(ISP)正在努力管理其網絡不斷擴大的規模和范圍,以及對更高可靠性和新服務(如虛擬專用網絡)的需求。與這兩種趨勢并行的是,商品計算平臺的快速發展意味著服務器的內存和處理資源通常比一年或兩年前部署的路由器的控制平面處理器要多得多。

這些趨勢催生了兩項創新:

  • 控制和數據平面之間的開放接口,例如由因特網工程工作隊(IETF)標準化的Forces(轉發和控制元件分離)接口和Linux中Kernellevel包轉發功能的Netlink接口;
  • 以及網絡的邏輯集中控制,如IETF的路由控制平臺(RCP)和軟路由器架構以及路徑計算單元(PCE)協議所示。

這些創新是由行業對ISP網絡中路由管理技術的需求推動的,一些早期關于分離數據和控制平面的建議也來自學術界,包括ATM網絡和主動網絡。

與早期關于主動網絡的研究相比,這些項目側重于網絡管理中的緊迫問題,重點是:

  • 網絡管理員(而不是最終用戶和研究人員)的創新
  • 控制平面(而不是數據平面)的可編程性
  • 網絡范圍的可見性和控制(而不是設備級別配置)。

網絡管理應用包括:根據當前的流量負載選擇更好的網絡路徑,在計劃的路由更改期間最小化瞬時中斷,使客戶網絡對流量有更大的控制,以及重定向或丟棄可疑的攻擊流量。

一些控制應用程序使用傳統路由器在運營的ISP網絡中運行,包括部署的智能路由服務控制點(IRSCP),以在AT&T的第1層骨干網絡中為虛擬專用網絡客戶提供增值服務。雖然這段時間的大部分工作都集中在管理單個ISP內的路由,但一些工作也提出了實現跨多個管理域的靈活路由控制的方法。

將控制功能從網絡設備轉移到單獨的服務器上是有意義的,因為網絡管理,顧名思義,是一種網絡范圍的活動。邏輯上集中的路由控制器是通過開源路由軟件的出現而實現的,它降低了創建原型實現的障礙。服務器技術的進步意味著單個商品服務器可以存儲所有的路由狀態,并計算大型ISP網絡的所有路由決策,這反過來又啟用了簡單的主備份復制策略,其中備份服務器存儲與主服務器相同的狀態并執行相同的計算,以確保控制器的可靠性。

Intellectual contributions

最初分離控制平面和數據平面的嘗試是相對實用的,但它們代表了一種與因特網傳統上緊密耦合的路徑計算和包轉發的重大概念性背離。將網絡的控制平面和數據平面分開的努力產生了幾個概念,這些概念在隨后的SDN設計中得到了推廣。

  • 使用數據平面的開放接口進行邏輯集中控制

IETF的Forces工作組提出了一個標準的、開放的數據平面接口,以實現控制平面軟件的創新。軟路由器使用ForCES API允許單獨的控制器在數據平面中安裝轉發表條目,從而能夠從路由器中完全刪除控制功能。不幸的是,主要路由器供應商沒有采用ForCES,這妨礙了增量部署。RCP沒有等待新的、開放的API出現,而是使用現有的標準控制平面協議(邊界網關協議)在傳統路由器中安裝轉發表條目,從而實現即時部署。OpenFlow還面臨著類似的向后兼容性挑戰和限制——特別是,最初的OpenFlow規范依賴于與商品交換機硬件功能的向后兼容性。

  • 分布式狀態管理

邏輯集中式路由控制器面臨著涉及分布式狀態管理的挑戰——必須復制邏輯上集中的控制器以應對控制器故障,但復制可能會導致副本之間的狀態不一致。研究人員探索了可能的故障場景和一致性要求,至少在路由控制的情況下,控制器副本不需要一般的狀態管理協議,因為每個副本最終都會計算相同的路由(在學習相同的拓撲和路由信息之后)和路由協議收斂期間的暫時中斷,即使使用傳統協議也可以接受。為了更好的可伸縮性,每個控制器實例可以負責拓撲的單獨部分,然后這些控制器實例可以相互交換路由信息,以確保一致的決策。幾年后,在分布式SDN控制器的背景下,構建分布式控制器的挑戰將再次出現——分布式SDN控制器面臨著支持任意控制器應用的更普遍的問題,需要更復雜的分布式狀態管理解決方案。

Myths and misconceptions

當這些新的架構被提出時,批評者以健康的懷疑態度看待它們,經常激烈地爭論邏輯上集中的路由控制將違反“命運共享”,因為控制器可能獨立于負責轉發流量的設備而失敗。許多網絡運營商和研究人員認為,將控制平面和數據平面分離是一個固有的壞主意,因為最初沒有明確說明如果控制器出現故障,這些網絡將如何繼續正確運行。懷疑論者還擔心,邏輯上的集中控制從概念上簡單的路由器模型轉移到了實現分布式共識的路由器上,它們最終都對網絡狀態有一個共同的看法(例如,通過洪泛)。在邏輯集中控制中,每個路由器對路由選擇過程的結果只有一個純本地視圖,事實上當這些項目扎根時,即使是傳統的分布式路由解決方案也已經違反了這些原則。將包轉發邏輯移入硬件意味著路由器的控制平面軟件可能獨立于數據平面而失敗,類似地,分布式路由協議采用可伸縮技術,如OSPF區域和BGP路由反射器,其中網絡中一個區域的路由器對其他區域的路由信息的可見性有限。

正如我們在下一節中所討論的,控制平面和數據平面的分離有些自相矛盾,使得研究人員能夠更清楚地思考分布式狀態管理:控制平面和數據平面的分離促進了狀態管理層的出現網絡狀態的一致視圖

In search of generality

主流設備供應商幾乎沒有動力采用像ForCES這樣的標準數據平面API,因為開放API可以使新的進入者進入市場。因此,需要依賴現有的路由協議來控制數據平面,這對可編程控制器能夠支持的應用范圍造成了很大的限制。傳統的IP路由協議計算目標IP地址塊的路由,而不是基于更大范圍的頭字段(例如,MAC和IP地址、TCP和UDP端口號)提供更大范圍的功能(例如,丟棄、泛洪或修改數據包),就像OpenFlow。最后,雖然行業原型和標準化工作取得了一些進展,但普遍采用仍然是難以捉摸的,為了拓寬控制和數據平面分離的視野,研究人員開始探索邏輯集中控制的全新體系結構。

4D項目主張四個主要層:

  • 數據平面(用于基于可配置規則處理分組)
  • 發現平面(用于收集拓撲和流量測量)
  • 傳播平面(用于安裝分組處理規則)
  • 決策平面(由邏輯上集中的控制器組成,這些控制器將網絡級目標轉換為分組處理狀態)

幾個小組開始設計和建造系統,將這種高層次的方法應用于新的應用領域,超出了路線控制。具體而言,Ethane項目及其直接前身Sane為企業網絡中的訪問控制創建了一個邏輯上集中的、流級的解決方案。Ethane根據高級安全策略將交換機減少到由控制器填充的流表,Ethane項目及其在斯坦福計算機科學系的運行部署為創建OpenFlow奠定了基礎。特別是,Ethane中的簡單交換機設計成為了最初OpenFlow API的基礎。

2.3 OpenFlow and Network OSes

2000年代中期,受實驗基礎設施成功的鼓勵,研究人員和資助機構對大規模網絡實驗的想法產生了興趣,政府為大型“儀器”單獨提供資金,這些大型“儀器”以前是留給其他學科建造昂貴的共享基礎設施,如對撞機和望遠鏡。這種熱情的一個結果是創建了全球網絡創新環境(GENI),由NSF資助的GENI項目辦公室和歐盟消防計劃。

也有批評者指出,對基礎設施的這一大筆投資并沒有與使用它的精心構思的想法相匹配。在此過程中,斯坦福大學的一組研究人員創建了一個全新的項目,并將重點放在更本地化、更易處理的規模上——校園網。在OpenFlow出現之前,SDN的基本思想面臨著完全可編程網絡和實用主義之間的緊張關系,后者將使RealWorld部署成為可能。

OpenFlow在這兩個目標之間取得了平衡,它啟用了比早期路由控制器更多的功能,并通過在商品交換機中越來越多地使用商用硅芯片組來構建現有的交換機硬件。盡管依賴現有的交換機硬件在一定程度上限制了靈活性,但OpenFlow幾乎可以立即部署,這使得SDN的移動既實用又大膽。

OpenFlow API的創建之后,緊接著是NOX這樣的控制器平臺的設計,它支持創建許多新的控制應用程序。OpenFlow交換機有一個數據包處理規則表,其中每個規則都有一個模式(與數據包頭中的位匹配)、一個操作列表(例如,丟棄、溢出、轉發特定接口、修改頭字段或將數據包發送到控制器)、一組計數器(用于跟蹤字節和數據包的數量)和優先級(消除具有重疊模式的規則之間的歧義)。在接收到數據包時,OpenFlow交換機識別最高優先級匹配規則,執行相關操作,并遞增計數器。

Technology push and use pull

Intellectual contributions

Myths and misconceptions

In search of control programs and use cases

3. Network Virtualization:

在本節中,我們將討論網絡虛擬化,這是SDN早期的一個突出的“用例”。

網絡虛擬化表示從底層物理設備分離的網絡的抽象,網絡虛擬化允許多個虛擬網絡在共享基礎設施上運行,并且每個虛擬網絡可以具有比底層物理網絡更簡單(更抽象)的拓撲。例如,虛擬局域網(VLAN)提供了一個跨越多個物理子網的單一LAN的假象,多個VLAN可以在相同的交換機和路由器集合上運行。

盡管網絡虛擬化在概念上獨立于SDN,但近年來這兩種技術之間的關系變得更加密切。在討論網絡虛擬化之前,我們有三個注意事項:

首先,一個完整的網絡虛擬化歷史將需要一個單獨的調查,我們專注于網絡虛擬化的發展,這些發展與可編程網絡的創新直接相關。

第二,雖然網絡虛擬化作為sdn的一個用例已經獲得了顯著的地位,但這個概念早于現代SDN,事實上已經與可編程網絡并行發展。這兩種技術實際上是緊密耦合的——可編程網絡通常被認為是共享基礎設施的機制(在數據中心的多個租戶之間,在校園的管理組之間,或者在實驗設施中進行實驗),并支持不同于物理網絡的邏輯網絡拓撲,這兩者都是網絡虛擬化的核心原則。

最后,“網絡虛擬化”的精確定義是難以捉摸的,對于我們討論的一些機制(例如切片)是否代表網絡虛擬化的形式,專家們自然不同意。在本文中,我們定義了網絡虛擬化的范圍,以包括任何有助于在底層物理網絡基礎設施上托管虛擬網絡的技術。

Network Virtualization before SDN

多年來,網絡設備一直支持以VLAN和虛擬專用網的形式創建虛擬網絡。但是,只有網絡管理員才能創建這些虛擬網絡,并且這些虛擬網絡僅限于運行現有的網絡協議,因此逐步部署新技術被證明是困難的。相反,研究人員和實踐者求助于運行覆蓋網絡,其中一小組升級的節點使用隧道在遺留網絡的基礎上形成自己的拓撲。在覆蓋網絡中,升級后的節點運行自己的控制平面協議,并通過封裝數據包、通過傳統網絡發送數據包和在另一端解封裝數據流(和控制平面消息)來相互引導數據流。Mbone(用于多播)、6bone(用于ipv6)和X-bone是早期的突出例子。

這些早期的覆蓋網絡由運行特殊協議的專用節點組成,希望能刺激對網絡基礎設施的改進。覆蓋網絡的概念很快擴展到包括任何安裝和運行特殊應用程序的終端主機,這是受到早期對等文件共享應用程序(如Napster和Gnutella)成功推動的。除了對點對點協議的重要研究外,網絡研究界重新開始了使用覆蓋網絡作為改善網絡基礎設施的方法的研究,例如彈性覆蓋網絡的研究,在該網絡中形成了少量的通信主機集合對網絡故障和性能問題作出快速反應的覆蓋層。

與主動網絡相比,覆蓋網絡不需要網絡設備的任何特殊支持,也不需要互聯網服務提供商的合作,因此部署起來容易得多。

為了降低實驗覆蓋網絡的障礙,研究人員開始構建虛擬實驗基礎設施,如Planetlab,允許多個研究人員在共享和分布式主機集合上運行自己的覆蓋網絡。有趣的是,Planetlab本身是一種“可編程路由器/交換機”的主動網絡形式,但它使用的是一組服務器而不是網絡節點,并為程序員提供了一個傳統的操作系統(即Linux)。這些設計決策刺激了分布式系統研究社區的采用,導致在這個社區中原型系統實驗的角色顯著增加,基于共享實驗平臺在促進實驗系統研究方面的成功,研究人員開始提倡創建共享實驗平臺,推動對虛擬拓撲的支持。該虛擬拓撲可以在底層網絡中運行自定義協議,以使實際的實驗,以運行流量并排運行。

在這個模型中,網絡設備本身“托管”了虛擬拓撲,回到了早期的Tempest體系結構,其中多個虛擬ATM網絡可以在同一組物理交換機上共存。Tempest體系結構甚至允許交換機轉發行為使用軟件控制器定義,為控制和數據平面分離工作做鋪墊。

GENI倡議將虛擬化和可編程網絡基礎設施的概念擴展到更大的范圍,為網絡和分布式系統的研究建立了一個國家實驗基礎設施。除了實驗性的基礎設施,一些研究人員認為網絡虛擬化可以成為未來互聯網的基礎,使多個網絡架構同時共存(每個架構都針對不同的應用或需求進行了優化,或者由不同的業務實體運營),并隨著時間的推移而發展以滿足不斷變化的需求。

Relationship of Network Virtualization to SDN

網絡虛擬化(從邏輯網絡的角度對物理網絡進行抽象)顯然不需要SDN。同樣,SDN(邏輯集中控制平面與底層數據平面的分離)并不意味著網絡虛擬化。然而,有趣的是,網絡虛擬化和SDN之間的共生關系已經出現,這已經開始催化幾個新的研究領域。

SDN和網絡虛擬化主要有三種關系:

  • SDN作為網絡虛擬化的一種支持技術

云計算使網絡虛擬化變得突出,因為云提供商需要一種方式,允許多個客戶(或“租戶”)共享同一網絡基礎設施。Nicira的網絡虛擬化平臺(Network Virtualization Platform,NVP)提供了這種抽象,而不需要底層網絡硬件的任何支持,解決方案是使用覆蓋網絡為每個租戶提供連接其所有虛擬機的單個交換機的抽象。然而,與先前在覆蓋網絡上的工作相比,每個覆蓋節點實際上是物理網絡的一個擴展——一個軟件交換機(如Open vSwitch),它封裝了發送到其他服務器上運行的虛擬機的流量。邏輯集中式控制器在這些虛擬交換機中安裝規則,以控制如何封裝數據包,并在虛擬機移動到新位置時更新這些規則。

  • ?網絡虛擬化用于評估和測試SDN

將SDN控制應用程序與底層數據平面分離的能力,使得在將SDN控制應用程序部署到操作網絡之前,可以在虛擬環境中測試和評估SDN控制應用程序。Mininet使用基于進程的虛擬化在同一物理(或虛擬)機上運行多個虛擬OpenFlow交換機、終端主機和SDN控制器,每個控制器都作為單個進程。使用基于進程的虛擬化允許Mininet模擬一個網絡,在一臺機器上有數百個主機和交換機。在這樣的環境中,研究人員或網絡運營商可以開發控制邏輯,并在生產數據平面的全面仿真上輕松地對其進行測試。一旦對控制平面進行了評估、測試和調試,就可以將其部署到實際的生產網絡上。

  • 虛擬化(切片)SDN

在傳統網絡中,虛擬化路由器或交換機是很復雜的,因為每個虛擬組件都需要運行自己的Controlplane軟件實例,相比之下虛擬化“啞”SDN交換機要簡單得多。FlowVisor系統使校園能夠支持在承載生產流量的相同物理設備上進行聯網研究的試驗臺,其主要思想是將業務流空間劃分為“片”(Planetlab的早期工作中引入的概念),其中每個片有一個網絡資源共享,由不同的SDN控制器管理。FlowVisor作為Hypervisor運行,向每個SDN控制器和底層交換機傳遞OpenFlow。

最近的工作建議對家庭網絡進行分層控制,以允許不同的第三方服務提供商(如智能電網運營商)在網絡上部署服務,而無需安裝自己的基礎設施,最近的工作也提出了用自己的邏輯拓撲和地址空間來表示軟件定義網絡的每個“片段”的方法。

Myths and misconceptions

人們經常提到所謂的“SDN的好處”——比如分攤物理資源的成本,或者在實際上來自網絡虛擬化的多租戶環境中動態地重新配置網絡。盡管SDN有助于網絡虛擬化,因此可能使其中一些功能更易于實現,但必須認識到SDN提供的功能(即數據和控制平面的分離,分布式網絡狀態的抽象)不能直接提供這些好處

Exploring a broader range of use cases

盡管SDN在早期已經取得了一些實際的成功,并且確實提供了支持網絡虛擬化的特定用例所急需的技術,但是需要做更多的工作來改進現有的基礎設施,并探索SDN解決更廣泛的用例集問題的潛力。盡管早期的SDN部署主要集中在大學校園、數據中心和私人骨干網,但最近的工作探索了SDN的應用和擴展,使其擴展到更廣泛的網絡設置,包括家庭網絡、企業網絡、Internet交換點,蜂窩核心網絡,蜂窩和WiFi無線接入網絡,以及終端主機應用和網絡的聯合管理。每一個這樣的環境都會帶來許多新的機遇和挑戰,社區將在未來幾年中探索這些機遇和挑戰。

4. Conclusion:

本文介紹了可編程網絡的發展歷史——可編程網絡的概念最初形成為主動網絡支持許多與SDN相同的愿景,但缺乏明確的用例和增量部署路徑。在主動網絡研究項目時代之后,鐘擺從視覺轉向實用主義,以數據和控制平面分離的形式,使網絡更易于管理,這項工作主要集中在路由網絡流量的更好的方法上,這比以前關于主動網絡的工作要細得多。最終,關于OpenFlow和網絡操作系統的工作在愿景和實用主義之間取得了正確的平衡,這項工作提倡對廣泛的應用進行網絡范圍的控制,但僅依賴于交換芯片組的現有能力。現有交換機硬件的向后兼容性吸引了許多設備供應商,他們要求在不斷增長的數據中心網絡市場上展開競爭,當SDN在網絡虛擬化中發現了一個引人注目的用例時,廣泛、清晰的愿景與廣泛采用的實用策略之間的平衡得到了重視。

隨著可持續發展網絡的不斷發展,我們相信歷史有重要的教訓要講。

首先,SDN技術將在“使用拉動”的基礎上生存或消亡。盡管SDN通常被認為是所有網絡問題的解決方案,但值得記住的是,SDN只是一個更容易解決網絡管理問題的工具,SDN僅僅是把開發新應用程序和解決長期問題的能力交給我們,在這方面,我們的工作才剛剛開始。如果過去有任何跡象表明,這些新技術的發展將需要在多個時間尺度上進行創新,從長期大膽的愿景(如積極的網絡)到近期創造性的問題解決(如專注于分離控制和數據平面的工作)。

第二,遠見和實用主義之間的平衡仍然脆弱。SDN的大膽設想提倡各種各樣的控制應用程序,然而OpenFlow對數據平面的控制僅限于包頭字段上的原始匹配操作。我們應該記住,OpenFlow的最初設計是由快速采用的愿望驅動的,而不是最初的原則。支持廣泛的網絡服務需要更復雜的方法來分析和操作流量(例如,深度數據包檢查,數據包的壓縮、加密和轉碼),使用商品服務器(例如,x86機器)或可編程硬件(例如,FPGAS,網絡處理器和/或GPU)。有趣的是,對更復雜的數據平面功能(如網絡功能虛擬化)的重新興趣,讓哈肯回到了先前關于主動網絡的工作中,使我們的故事更為全面。保持SDN的大膽設想需要我們繼續“開箱即用”地思考網絡編程的最佳方法,而不受當前技術的限制。與其簡單地按照當前的OpenFlow協議設計SDN應用程序,我們應該考慮我們希望對數據平面進行什么樣的控制,并用實際的部署策略來平衡這一愿景。

?

轉載于:https://www.cnblogs.com/chelinger/p/11545604.html

總結

以上是生活随笔為你收集整理的The Road to SDN: An Intellectual History of Programmable Networks的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

欧美色图88 | 视频一区在线免费观看 | 国产成人一区二区三区免费看 | 中文字幕 二区 | 在线99热 | 国产日韩精品一区二区在线观看播放 | 黄毛片在线观看 | 免费观看国产成人 | 国产精品视频免费看 | 久在线观看 | 欧美激情h | 亚洲国产中文在线 | 777久久久 | 日韩欧美在线免费 | 91超级碰 | 91精品国产91p65 | 色在线观看网站 | 精品久久九九 | 在线观看日韩精品 | 国产精品免费久久久久影院仙踪林 | 久草综合在线观看 | 一级a毛片高清视频 | 九九精品久久 | 亚洲一级片在线观看 | 精壮的侍卫呻吟h | 久久国产免 | 免费看国产曰批40分钟 | 麻豆免费视频观看 | 人人搞人人爽 | 天天插天天狠天天透 | 精产嫩模国品一二三区 | 久久伊人精品一区二区三区 | 成人黄色电影免费观看 | 玖玖爱免费视频 | 免费日韩一区二区三区 | 色噜噜在线观看视频 | 日韩天天综合 | 国产日韩欧美视频在线观看 | 婷婷四房综合激情五月 | 久久精品一区二区三区四区 | 在线免费观看视频 | 免费成人av在线 | 日本精品视频在线播放 | 久久亚洲私人国产精品 | 五月天免费网站 | 高清不卡一区二区三区 | 久久精品美女视频 | 99视频在线免费播放 | 国产精品久久网站 | 黄色网在线免费观看 | 最新色站 | 日韩网站一区二区 | 精品国产日本 | 中文字幕精品一区 | 天天色天天射综合网 | www夜夜操| 99久久激情视频 | 成人欧美一区二区三区在线观看 | 精品国产黄色片 | 亚洲精品视频在线观看免费视频 | 久久精品一二区 | 久久久www成人免费精品张筱雨 | 国产精品原创视频 | 91精品视频播放 | 免费在线观看a v | 激情网五月婷婷 | 日产乱码一二三区别免费 | 久久久麻豆视频 | 欧美日韩亚洲精品在线 | av一区在线 | 欧美成人理伦片 | 色爽网站 | 丁香五月亚洲综合在线 | 超碰在线公开 | 国产精品麻豆欧美日韩ww | 久热久草 | 天天av资源| a极黄色片| 四虎在线视频免费观看 | 一区二区三区影院 | 成人欧美一区二区三区在线观看 | 在线观看视频黄色 | 九九国产精品视频 | 综合五月 | 亚洲一二区视频 | 亚洲三级网 | 五月婷在线播放 | 色婷婷综合视频在线观看 | 日韩精品欧美专区 | 国产黄视频在线观看 | 91成人在线视频 | 国产原创在线 | 国产精品女教师 | 四虎影院在线观看av | 成人一级免费电影 | 国产高清av免费在线观看 | 一区二区三区高清不卡 | 国产在线不卡精品 | 国产亚洲精品成人av久久影院 | 91精品久久久久久久久久入口 | 一区二区三区国产精品 | 不卡视频国产 | 免费国产一区二区视频 | 四虎在线观看精品视频 | 91久久一区二区 | 婷婷六月丁 | 欧美亚洲另类在线视频 | www.日日操.com | 日韩二区在线播放 | 91久久影院| www黄com | 韩国一区在线 | 精品久久久久久亚洲综合网站 | 成人a在线观看 | 婷婷在线免费观看 | 99久久精品国产毛片 | 99精品视频在线播放观看 | 国产精品va在线播放 | 天天色天天上天天操 | 国产18精品乱码免费看 | 久久精品婷婷 | 国产欧美精品一区二区三区 | 免费人人干 | 国产精品美女视频网站 | 午夜影视一区 | 9在线观看免费高清完整 | 99视频一区 | 波多野结衣电影一区二区三区 | 成年人免费看的视频 | 99久久精品国产毛片 | 黄色成人91 | 韩国精品一区二区三区六区色诱 | 精品国产免费一区二区三区五区 | 97精品视频在线 | 国产亚洲婷婷免费 | 国产麻豆成人传媒免费观看 | 国产精品免费视频观看 | 国产精品视频资源 | 国产精品成人品 | 麻豆小视频在线观看 | 91精品在线免费观看视频 | 亚洲精品国精品久久99热一 | 又黄又爽的视频在线观看网站 | 亚洲福利精品 | 亚洲国内精品在线 | 欧美日本日韩aⅴ在线视频 插插插色综合 | 亚洲精品97| 久久天天躁夜夜躁狠狠躁2022 | 久久一区二区三区日韩 | 亚洲老妇xxxxxx| 久久99精品国产麻豆宅宅 | 久草在线官网 | 五月婷婷导航 | 亚洲天堂网视频 | 看毛片的网址 | 在线电影 你懂得 | 99视频黄| 韩国一区二区av | 色在线观看网站 | 日韩成人黄色 | 亚洲国产精品资源 | 国产免费又爽又刺激在线观看 | 免费在线一区二区三区 | 免费观看国产精品视频 | 九九免费精品视频 | 久久国产精品99久久久久久丝袜 | 国产黄免费在线观看 | 国产日产亚洲精华av | 黄色成人毛片 | 伊人色综合网 | 99福利片 | 97视频免费在线观看 | 高清av中文字幕 | 久草在线在线视频 | 午夜三级影院 | 亚洲国产精品日韩 | 亚洲欧美精品一区二区 | 欧美日韩一区二区久久 | 久久超级碰 | 日韩激情中文字幕 | 91九色视频导航 | 免费在线观看一区 | 日韩精品一区二区三区外面 | 99久久激情视频 | 亚洲妇女av | 亚洲欧美日本一区二区三区 | 成人国产网站 | 久久久穴| 91精品婷婷国产综合久久蝌蚪 | 夜夜夜夜夜夜操 | 久久99热精品 | 婷婷精品 | 国产黄色精品视频 | 国产人在线成免费视频 | 久久免费视频这里只有精品 | 亚洲资源在线观看 | 天天操综合网站 | 日韩成人邪恶影片 | 黄色av电影在线观看 | 久久精品亚洲综合专区 | 久久免费美女视频 | 久久久久亚洲精品 | 99在线视频网站 | 91看片看淫黄大片 | 国产精品综合在线观看 | 美女网站视频久久 | 色婷婷在线观看视频 | 色狠狠综合天天综合综合 | 99久久日韩精品视频免费在线观看 | 免费在线观看av电影 | 国内精品国产三级国产aⅴ久 | 亚洲精品视频在 | av在线超碰 | 日韩精品不卡在线观看 | 中文字幕国产精品一区二区 | 日韩中文在线视频 | 成人av片免费观看app下载 | 欧美久久久久久久久久 | 在线观看中文字幕亚洲 | 九九久| 在线观看亚洲精品视频 | www.久久色| 久久综合九色综合97婷婷女人 | 国产一区二区在线视频观看 | 98精品国产自产在线观看 | 欧美一级片在线播放 | 亚洲日本韩国一区二区 | 日韩高清激情 | 成 人 黄 色 视频 免费观看 | 日韩在线免费不卡 | 九九久久久久久久久激情 | 人人人爽 | 中文字幕日韩一区二区三区不卡 | 日韩免费电影一区二区 | 日韩色视频在线观看 | www.91国产 | 91久久精品一区二区三区 | 在线视频久 | 亚洲成人精品在线观看 | 亚欧日韩成人h片 | 国产精品综合久久久 | 成人av一区二区在线观看 | 精品久久久免费视频 | 91九色蝌蚪视频 | 精品专区一区二区 | 国产一级高清视频 | 狠狠色香婷婷久久亚洲精品 | 国产精品乱码久久久久久1区2区 | 亚洲激情久久 | 96av麻豆蜜桃一区二区 | 91看片成人| 又黄又刺激的视频 | 人人草网站 | 亚洲黄网站| 中文字幕国产视频 | 免费在线激情电影 | 九七视频在线观看 | 美女网站在线免费观看 | 欧美精品亚洲精品日韩精品 | 区一区二区三在线观看 | 密桃av在线 | 在线免费精品视频 | 四虎在线影视 | 狠狠躁日日躁狂躁夜夜躁av | 国产美女网站在线观看 | 久久久久久欧美二区电影网 | 日日夜夜天天久久 | 在线激情影院一区 | 天天伊人网 | 国产一级不卡毛片 | 国内综合精品午夜久久资源 | 国产v在线 | 视频国产一区二区三区 | 亚洲视频1| 久久国产欧美日韩精品 | 欧美 国产 视频 | 亚洲精品久久久久中文字幕二区 | 狠狠干电影| 久久99网| 日韩欧美在线综合网 | 国内精品久久久 | 久久久96| 久久久www免费电影网 | 免费看三片 | 色94色欧美 | 夜色成人网 | 久久dvd| 国产精品久久久久久一区二区三区 | 久久久久中文字幕 | 探花视频在线观看 | 99精品在线播放 | 欧美一级片播放 | 久草视频国产 | 国产精品一区二区在线观看 | 国产99re| 精品国产亚洲一区二区麻豆 | 在线免费观看国产视频 | 日韩免费视频观看 | 中文字幕在线观看网站 | 国产精品久久久久久久久久久免费看 | 91大片网站| 欧美亚洲精品在线观看 | 99久久精品国产网站 | 午夜10000| 激情动态 | 色在线观看网站 | 亚洲码国产日韩欧美高潮在线播放 | 有码中文字幕在线观看 | 最新中文字幕在线资源 | 精品国产精品国产偷麻豆 | 日韩天天干 | 欧美孕妇视频 | 麻豆91精品视频 | 在线国产精品一区 | 色综合天天色综合 | 日韩中文字幕网站 | 欧美综合在线视频 | 国产不卡片 | 草久在线 | 欧美另类巨大 | 亚洲aaa毛片 | 久久国产精品一区二区 | 97在线观视频免费观看 | 亚洲精品视频在线观看免费视频 | 国产精品18久久久久久首页狼 | 黄色com | 久久久精品久久 | 91看片在线 | 亚洲精品自拍视频在线观看 | 操一草 | 在线观看亚洲精品 | 亚洲第一区在线观看 | 少妇超碰在线 | 国产中的精品av小宝探花 | 精品久久久久久久久久久院品网 | 欧美精品生活片 | 激情视频综合网 | 亚洲美女视频网 | 国产亚洲精品美女 | 亚洲人成人在线 | 午夜精品久久久久久久久久久 | 国产成人一区三区 | 久久人人爽人人爽人人 | 成年人免费看的视频 | 久久久久免费精品视频 | 在线观看 国产 | 亚洲国产精品久久久久久 | 国产一级视屏 | 黄色h在线观看 | 国产网站av| 午夜精品视频免费在线观看 | 久久久久久久久久久久久久av | 国产精品久久久久久久久久久免费 | 精品国产伦一区二区三区免费 | 玖玖在线资源 | 日韩艹| 伊人久久国产 | 欧美美女一级片 | 久久国产免费 | 天天操夜操视频 | 免费在线播放视频 | av理论电影 | 最近中文字幕免费av | 午夜丁香视频在线观看 | 日韩在线观看小视频 | 国产永久免费 | 91精品久久香蕉国产线看观看 | 久久不卡国产精品一区二区 | 美女视频黄是免费的 | 久久午夜网 | 色诱亚洲精品久久久久久 | 亚洲视屏一区 | 国内免费久久久久久久久久久 | 最新日韩在线观看 | 黄网站免费久久 | 久久国产欧美日韩 | 伊人五月天综合 | 美女视频是黄的免费观看 | 欧美在线久久 | 亚洲精品视频大全 | 久久av中文字幕片 | 日韩网站视频 | 激情五月色播五月 | 久久高清免费视频 | 精品伊人久久久 | 国产黄在线免费观看 | 久久天天操 | 97精品国产97久久久久久久久久久久 | 丁香花在线观看免费完整版视频 | 欧美国产日韩一区二区三区 | 国产精品久久久久久久久久久久久 | 午夜少妇 | 人人爽人人爽av | 干干操操 | 国产亚洲精品日韩在线tv黄 | 日韩欧美国产视频 | 成人影片在线播放 | 最新一区二区三区 | 亚洲国产精品第一区二区 | 亚洲视频axxx | 中文字幕av在线免费 | 看毛片网站 | 精品少妇一区二区三区在线 | 免费色视频| 婷婷视频导航 | 99国产视频在线 | 成人免费观看视频大全 | 亚洲色图27p | 午夜精品一区二区三区四区 | 欧美精品国产综合久久 | 日韩特级黄色片 | 欧美性脚交| 91最新网址在线观看 | 国产精品免费观看在线 | 日本激情中文字幕 | 亚洲女在线 | 久久精美视频 | 久久99热精品这里久久精品 | 97超级碰碰碰碰久久久久 | 人人爽人人爽人人片 | 免费在线观看av电影 | 精品一二区 | 免费精品人在线二线三线 | 欧美日韩国产综合一区二区 | 欧美一区二区三区在线 | 亚州性色 | 久草影视在线观看 | 国产精品va在线 | 久久久免费少妇 | 亚洲免费在线观看视频 | 午夜在线免费视频 | a视频免费看| 午夜美女福利 | 久久免费视频这里只有精品 | 精品久久久久久综合日本 | 久草免费在线 | 亚洲激情中文 | 久久手机免费视频 | 高潮毛片无遮挡高清免费 | 日精品| 午夜精品一区二区三区免费视频 | 亚州人成在线播放 | 黄色资源网站 | 中文在线亚洲 | 91插插插网站 | 久久无码av一区二区三区电影网 | 国产精品美女久久久久久 | 91自拍成人| 国内精品久久久久久久久久清纯 | 香蕉视频导航 | 狠狠狠狠狠狠干 | 国产在线一线 | 久久国产精品久久久久 | 五月婷婷操 | 国产色视频一区二区三区qq号 | 日韩a免费 | 日韩在线网| 国产精品久久久久久影院 | 日韩av成人在线观看 | 色婷婷99| 中文字幕区 | 亚洲精品久久久久久国 | 成人在线免费观看网站 | 国产又粗又猛又黄又爽视频 | 亚洲精品在线免费 | 国产清纯在线 | 亚洲国内精品视频 | 欧美激情综合五月 | 国产成人福利在线观看 | 成人av一级片 | a视频免费看| 久草在线免费看视频 | 国产一区二区三区午夜 | 97人人添人澡人人爽超碰动图 | 91爱爱免费观看 | 久久久私人影院 | 一区二区三区免费在线观看视频 | 亚洲自拍偷拍色图 | 天天玩天天干 | 成人av免费电影 | 国产一区精品在线 | 日韩免费一级电影 | 成年人在线免费看视频 | 黄色免费视频在线观看 | 欧美日韩另类在线观看 | 欧美成年人在线观看 | 欧美色综合 | 精品国产一区二区三区男人吃奶 | 九九久久免费 | 久久久久久久久毛片精品 | 四虎在线视频免费观看 | 天天色草| 国产成人无码AⅤ片在线观 日韩av不卡在线 | 久久精品视 | 青青久草在线 | 午夜国产福利在线 | 国产香蕉视频在线观看 | 亚洲精品免费在线 | 91精品久久香蕉国产线看观看 | 日韩视频免费观看高清 | 99久久99视频只有精品 | 在线观看亚洲成人 | 欧美另类调教 | 一区二区三区电影在线播 | 天天操天天操天天操天天 | 国内精品久久久久久久97牛牛 | 日韩中文在线视频 | www.婷婷色| 97视频人人免费看 | 黄色大全免费网站 | 亚洲午夜大片 | 亚洲精品www久久久 www国产精品com | 成人va视频 | 狠狠色丁香久久婷婷综合_中 | 欧美性成人 | 国产色网| 国产一级一片免费播放放a 一区二区三区国产欧美 | 永久免费av在线播放 | 免费影视大全推荐 | 91精品视频播放 | 中文字幕在线观看你懂的 | 国内精品视频在线播放 | 91精品国自产在线观看欧美 | 国产啊v在线| 97国产电影 | 国产一二区免费视频 | 午夜视频在线观看一区二区三区 | 天天操天天吃 | 操操色| 午夜精品久久久久久久99水蜜桃 | 亚洲国产成人在线播放 | 亚洲一区二区三区miaa149 | 天天操偷偷干 | 精品主播网红福利资源观看 | 人人爽夜夜爽 | 国产成人高清av | 日韩精品第1页 | 97超碰人人爱 | 69av视频在线 | 99久久久国产精品免费观看 | 国产精品成人一区二区 | 国产日本在线 | 久久精品官网 | 精品久久福利 | av电影在线播放 | 丁香婷婷综合色啪 | 亚洲黄色在线免费观看 | 91在线入口 | 91亚洲精品久久久久图片蜜桃 | 日韩激情久久 | 亚洲精品国偷拍自产在线观看蜜桃 | 色综合天天综合在线视频 | 成人试看120秒 | 一区中文字幕电影 | 丁香五月网久久综合 | 日本在线中文在线 | 亚洲成人国产 | 中文成人字幕 | 免费精品国产va自在自线 | 免费高清在线观看电视网站 | 91精品视频一区二区三区 | 精品久久久影院 | 中文国产在线观看 | 爱情影院aqdy鲁丝片二区 | 国产精品视频免费观看 | 天天综合天天做天天综合 | 超碰在线日本 | 激情丁香综合五月 | av网址aaa| 亚洲天堂网视频 | av久久在线| 中文字幕精品三级久久久 | 在线播放日韩av | 亚洲精品xxx | 久久中文字幕在线视频 | 狠狠色丁香九九婷婷综合五月 | 999国内精品永久免费视频 | 午夜免费福利片 | 欧美午夜视频在线 | 久久精品欧美一 | 免费在线黄色av | 亚洲精品美女久久17c | 不卡av免费在线观看 | 天天操天天干天天干 | 久久久精品国产免费观看同学 | 最近2019好看的中文字幕免费 | 在线免费av播放 | 成人一级片视频 | av成人在线播放 | 又大又硬又黄又爽视频在线观看 | 日韩视频在线观看免费 | 色综合中文字幕 | 久久免费av电影 | 久久久av免费 | 日韩中文字幕免费在线播放 | 国产黄色电影 | 麻豆高清免费国产一区 | 久久国产精品视频观看 | 国产一区二区电影在线观看 | 久久久亚洲成人 | 国产一级在线免费观看 | av电影不卡在线 | 成人天堂网 | 伊人久久影视 | 日韩女同一区二区三区在线观看 | 国产一区二区精品久久 | 九草视频在线观看 | 久久中文精品视频 | 91私密视频 | av福利在线免费观看 | 99精品国产福利在线观看免费 | 国产69久久精品成人看 | 免费看黄在线网站 | 久久久久久久久久久高潮一区二区 | 久久精品一区 | 亚洲精品456在线播放第一页 | 国产一区二区在线视频观看 | 国产精品成人一区二区三区吃奶 | 婷婷亚洲综合 | 免费亚洲一区二区 | 色5月婷婷 | 胖bbbb搡bbbb擦bbbb | 亚洲欧美国产精品久久久久 | 激情婷婷色 | 欧美另类美少妇69xxxx | 亚州国产精品 | 亚洲精品电影在线 | 五月婷婷综合久久 | 在线观看中文字幕av | 免费av在线播放 | 日本精品视频在线观看 | 中文字幕在线国产精品 | 国产中文字幕在线看 | 人人涩 | 91精品久久久久久综合五月天 | 国产网站色 | 久久系列 | 丁香婷婷在线观看 | 日韩欧美电影在线 | 不卡av在线播放 | 国产偷国产偷亚洲清高 | 久久人人爽爽人人爽人人片av | 91精品成人 | 三级黄在线 | 久久久国产精品亚洲一区 | 欧美性高跟鞋xxxxhd | 狠狠色综合欧美激情 | 国产精品一区二区精品视频免费看 | 欧美日韩一区二区三区在线观看视频 | 国产一级二级三级在线观看 | 美女网站一区 | 国产精品久久久久一区 | 手机看片国产 | 日韩美在线观看 | 亚洲欧美日韩在线一区二区 | 日韩最新av | 亚洲九九 | 不卡的av电影在线观看 | 黄色三级在线观看 | 中日韩欧美精彩视频 | 中文字幕在线日本 | 亚洲精品中文字幕视频 | 午夜精品久久久久久久99热影院 | 91成人在线网站 | 一本一本久久a久久精品牛牛影视 | 99精品在线视频观看 | 国产精品久久久久一区二区三区 | 波多野结衣电影一区二区 | 亚洲黄色在线播放 | 麻豆成人在线观看 | 中文字幕丝袜一区二区 | 在线观看aa| 色在线中文字幕 | 日本最大色倩网站www | 国产福利中文字幕 | 久久久久免费精品国产 | 91九色在线视频 | 国产一区二区三区免费在线观看 | 日日操日日干 | 亚洲国产精品久久久久久 | 久草视频在 | 视频国产一区二区三区 | 在线免费观看黄色 | 狠狠成人 | 中文资源在线播放 | 日日爱av| 激情中文字幕 | 999热视频| 午夜a区| 久久精品精品 | 欧美日韩免费视频 | 97色免费视频 | 亚洲一区二区观看 | 五月婷网站 | 精品亚洲欧美无人区乱码 | 天堂在线成人 | 欧美成年黄网站色视频 | 在线中文字幕视频 | 在线观看不卡的av | 波多野结衣在线视频免费观看 | 99精品免费网 | 成人免费观看网址 | 国产成人a亚洲精品 | 成年人黄色大片在线 | 国产99精品在线观看 | 婷婷在线综合 | 日日弄天天弄美女bbbb | 亚洲欧美999| 日本少妇视频 | 久草在线最新 | 成年美女黄网站色大片免费看 | 波多野结衣在线播放一区 | 在线免费观看国产精品 | 亚洲免费国产视频 | 亚洲h色精品 | 久草在线99 | 国产97在线观看 | a级成人毛片 | 天天操夜夜叫 | 91在线看视频免费 | 色久网| 久久久久www| 永久免费的啪啪网站免费观看浪潮 | 青青网视频 | 欧美日韩三级 | 天天舔夜夜操 | 波多野结衣久久精品 | 999久久国产| 久久久久久久久久久综合 | 久久免费公开视频 | 久久在线免费观看 | 狠狠操91| 51久久成人国产精品麻豆 | 高清国产在线一区 | 久久久久高清 | 精品麻豆入口免费 | 夜夜躁狠狠燥 | 又黄又爽又无遮挡的视频 | 国产精品久久久久久久久久了 | 黄色av免费看 | 四虎伊人 | av怡红院| 少妇18xxxx性xxxx片 | 日日日操操 | av免费电影网站 | 日韩黄色在线 | 免费高清在线观看成人 | 中文字幕一区二区三区四区在线视频 | 91久久在线观看 | 国产一区二区三区在线免费观看 | 久久综合久久综合久久 | 中文字幕在线免费看线人 | 草在线| 精品久久久99 | 亚洲免费国产视频 | 天天摸天天弄 | 日韩欧美高清一区二区三区 | 天天色天天色天天色 | 国产男女无遮挡猛进猛出在线观看 | 91资源在线视频 | 国内成人精品视频 | 国产精品成人国产乱 | 亚洲jizzjizz日本少妇 | 久久久久久国产精品 | 亚洲综合色婷婷 | 色丁香久久 | 国产打女人屁股调教97 | 丁香激情网 | www欧美日韩| 狠狠色狠狠色综合系列 | 日夜夜精品视频 | 国产97免费 | 国产专区日韩专区 | 亚洲在线观看av | 日韩电影一区二区三区 | 欧美视频xxx | 国产精品v a免费视频 | 成人a级黄色片 | 亚洲波多野结衣 | 黄色网址国产 | 久久影视一区 | 日韩av免费在线看 | 国产一区欧美日韩 | 国产韩国日本高清视频 | 永久免费看av| 国产精品自产拍在线观看 | 欧美日韩视频在线播放 | 午夜国产一区二区三区四区 | 婷婷久月 | 伊人亚洲综合网 | 91久久久久久久一区二区 | 日韩精品播放 | 欧美日韩网站 | 91片网| 探花视频免费观看高清视频 | 日日夜夜婷婷 | 国产伦理一区 | 一区二区精品视频 | 日韩一二三区不卡 | 99视频+国产日韩欧美 | 久久成人精品视频 | 综合久久精品 | 欧美极品在线播放 | 亚洲午夜精品电影 | 一区二区亚洲精品 | 日韩欧美在线播放 | 349k.cc看片app| 少妇自拍av | 黄色亚洲大片免费在线观看 | 精品久久一区二区三区 | 91亚洲狠狠婷婷综合久久久 | 久热免费 | 国产a国产 | 六月色丁 | 在线电影 一区 | 精品国产乱码一区二 | av黄色影院| 中文字幕日韩无 | 免费av在线网 | 成人欧美亚洲 | 国产精品视频免费观看 | 久久久久久久久久久久久久av | 国产亚洲视频在线观看 | 亚洲精品国产成人 | 在线国产视频一区 | 中文字幕一区二区三区在线视频 | 欧美精品免费在线观看 | 五月天激情视频在线观看 | 成人app在线免费观看 | 91在线免费播放 | 中文字幕黄网 | 热久久99这里有精品 | 天天天天色射综合 | 国产精品久久久久久超碰 | 黄色三级久久 | 色先锋av资源中文字幕 | 欧美激情精品久久久久久 | 天天操比 | 91精品国产乱码在线观看 | 日日夜夜狠狠操 | 亚洲国产精品成人va在线观看 | 免费观看全黄做爰大片国产 | 国产一级在线视频 | 97在线观看免费 | 国产午夜一区 | 在线观看日韩中文字幕 | 天海冀一区二区三区 | 国产区精品在线观看 | 五月婷婷六月丁香在线观看 | 一区二区三区免费在线播放 | 国产一区二区三区免费在线观看 | 亚洲天堂精品视频在线观看 | 国产在线一区二区三区播放 | 91探花在线视频 | 亚洲精品视频免费观看 | 日本丰满少妇免费一区 | 国产精品一区二区三区观看 | 五月天堂网 | 波多野结衣电影一区二区 | 亚洲国产剧情av | 五月天丁香综合 | 中文字幕亚洲精品日韩 | 在线亚洲天堂网 | 99热国产在线 | 日韩成人xxxx | 日韩av片无码一区二区不卡电影 | 久久久高清免费视频 | 成人毛片a | www.五月婷| 蜜臀av性久久久久蜜臀aⅴ四虎 | 在线播放第一页 | 日本久久久亚洲精品 | 国产精品区免费视频 | 久久xx视频| 亚洲精品小区久久久久久 | 丝袜美女在线观看 | 日韩欧美在线高清 | 一二区av | 国产黄色资源 | 狠狠干美女 | 亚洲精品无 | 亚洲精品在线视频观看 | 久久午夜电影院 | 色综合久久99 | 日韩欧美一区二区三区在线 | 国产亚洲视频在线观看 | 久久99久国产精品黄毛片入口 | 日韩欧美视频免费观看 | 国产在线传媒 | 亚洲日韩欧美一区二区在线 | 欧美一级片在线播放 | 日韩 国产 | 免费成人av在线 | 欧美疯狂性受xxxxx另类 | 中文字幕成人在线观看 | 国产中的精品av小宝探花 | 久久久18| 精品乱码一区二区三四区 | 青青视频一区 | 久久久久久久久久久国产精品 | 国产亚洲成人网 | 欧美日韩在线免费观看视频 | 五月天久久激情 | 亚洲在线a | 91大神一区二区三区 | 久久精品久久99 | 丁香一区二区 | 亚洲日本va午夜在线电影 | 色欲综合视频天天天 | 国产午夜精品一区二区三区嫩草 | 在线看片中文字幕 | 在线观看视频黄色 | 最新日韩在线观看视频 | 黄色小说网站在线 | 韩国一区二区av | 国产精品久久久av久久久 | 91视频88av | 国产精品久久久久久久久大全 | 毛片网站在线观看 | 成人看片| 免费一级日韩欧美性大片 | 欧美精品在线观看一区 | 久久艹中文字幕 | 国产在线一卡 | 色综合久久久久综合体 | 亚洲激情校园春色 | 激情图片qvod| 福利一区视频 | 久久久久免费精品国产小说色大师 | 久久99影院 | 欧美性生交大片免网 | 国产伦精品一区二区三区无广告 | 手机在线永久免费观看av片 | 久草在线一免费新视频 | 亚洲精品男人天堂 | 色激情在线 | 久久不见久久见免费影院 | 麻豆国产在线视频 | 久久综合九色综合欧美狠狠 | 五月天婷婷在线播放 | 五月天综合激情 | 综合色综合 | 亚洲一级久久 | 国产麻豆精品久久一二三 | 九九九视频精品 | 黄色成年| 国产生活一级片 | 奇米影视8888在线观看大全免费 | 蜜臀久久99精品久久久久久网站 | 国产精品国产三级国产不产一地 | 1024久久| 国产系列 在线观看 | 国产视频精选 | 99精品久久99久久久久 | 免费大片av| 69热国产视频 | 麻豆免费视频观看 | 国产中文字幕视频在线 | 99在线免费观看视频 | 91禁在线观看 | 中文有码在线视频 | 欧美日韩天堂 | 中文字幕亚洲欧美 | 天天射综合网视频 | 99精品国自产在线 | 久久久久久高潮国产精品视 | 狠狠操操操 | 国模精品一区二区三区 | 97热视频 | 黄色精品久久久 | 九九热99视频 | 午夜视频一区二区三区 | www.com.黄 | 久久精品99国产精品 | 久久国产99 | 久久久精品久久日韩一区综合 | www.色的| 国产黄大片 | 日韩欧美精品在线观看视频 | 1区2区视频 | 91网在线看| 69精品在线 | 欧美日韩中文国产一区发布 | 夜夜操天天操 | 狠狠色丁香婷婷综合最新地址 | 亚洲综合在线五月天 | www.国产毛片 | 91污视频在线 | 成人黄色片在线播放 | 91精选| 91一区在线观看 | 97色国产 | 欧美日本不卡高清 | 成人看片 | 国产视频1区2区 | 97超碰在线久草超碰在线观看 | 97中文字幕 | 日韩精品免费一区二区 |