日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

后台系统可扩展性学习笔记(五)负载均衡

發布時間:2023/12/1 71 豆豆
生活随笔 收集整理的這篇文章主要介紹了 后台系统可扩展性学习笔记(五)负载均衡 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

文章目錄

  • Load balancer(負載均衡器)
  • 請求傳輸拆解
  • DNS 負載均衡
  • 客戶端負載均衡
  • OSI 七層模型回顧
  • 2 層、3 層負載均衡
  • 3/4 層負載均衡
  • 7 層負載均衡

在 第一節談到了系統的橫向擴展在于從單機擴展到多機,那么面臨的第一個問題就是這些機器如何協同工作,即如何調度請求?

Load balancer(負載均衡器)

多服務器下的請求調度機制稱為負載均衡(Load balancing),調度器(Dispatcher)即負載均衡器(Load balancer):

負載平衡器的基本功能是能夠根據調度算法在集群中的多個后端服務器上分發傳入請求。
其主要作用是根據既定策略(如隨機、輪流)將客戶端請求分發給各個服務器,之前有過相關算法整理:13種負載均衡算法
優點:

  • 防止請求到達不可用的服務器
  • 防止資源過載
  • 消除單點故障,提升可用性

還可以用于:

  • SSL termination:處理 SSL 連接,將加密解密的工作前置到調度層
  • 會話保留(Session persistence):集中處理會話,避免切換服務器造成會話狀態丟失

也就是說,多機場景下,必須要有一個負責分發/調度請求的負載均衡器,那么,接下來的問題是應該在哪一層實現負載均衡機制

請求傳輸拆解

考慮一個 HTTP 請求從客戶端到服務器的通信過程,可以簡單劃分為 3 個階段:

  • 出發:客戶端發出請求
  • 途中:請求經網絡傳輸
  • 到達:服務器收到請求

對請求進行分發/調度,就是要想辦法(按既定策略)改變請求的目的地,那么,至少有 3 種思路:

  • 出發前:在請求經網絡傳輸之前,就確定最終目的地,例如 DNS 負載均衡、客戶端負載均衡
  • 傳輸中:在網絡傳輸的某些環節改變目的地,例如 4 層負載均衡
  • 到達后:在請求抵達服務器后,進行二次分發,例如 7 層負載均衡

下面逐個講解這幾種負載均衡

DNS 負載均衡

客戶端要向服務器發起請求,首先要知道服務器的 IP 地址,通過DNS來查詢,DNS 維護著域名與 IP 地址之間的映射關系,因此可以在這里實現負載均衡策略,將請求指向目標服務器(的 IP 地址),例如:

  • 輪流分發:添加一系列 A 記錄,將同一域名指向多個不同的 IP 地址即可,稱為round-robin DNS
  • 隨機分發:采用支持多值應答路由策略的 DNS 服務

這兩個方法簡單易用,但缺陷也很明顯:

  • 可靠性沒有保障:DNS 并不檢查服務器的可用性,即便目標服務器 down 掉了或者無法訪問了,也返回其 IP 地址
  • 更新不及時:DNS 的解析結果往往會被層層緩存,記錄更新無法立即生效

客戶端負載均衡

同理,把服務器 IP 地址選擇機制拿到客戶端來實現,就叫客戶端負載均衡,由客戶端自行選擇目標服務器的 IP 地址(不再通過 DNS 查詢):

例如,向客戶端提供服務器 IP 列表,客戶端發起請求之前隨機選取一個 IP,就能達到隨機分發的目的
比起 DNS 負載均衡,客戶端不存在緩存的問題,而且能夠進行更精細的控制,比如檢查服務可用性,并從中選取可用的 IP 地址

OSI 七層模型回顧

在計網中我們學過網絡的七層模型,將網絡通信分為 7 個抽象層:

自下而上,依次為:

  • 物理層(1):通過物理介質傳輸原始比特流,即物理信號
  • 數據鏈路層(2):提供可靠的節點間數據幀傳輸機制,具體工作包括MAC尋址
  • 網絡層(3):決定數據包傳輸采取的物理路徑,支持IP、ARP等協議,具體包括IP尋址、路由和流量控制
  • 傳輸層(4):提供可靠的報文傳輸機制,支持TCP、UDP等傳輸協議,此時依賴于IP和端口號通信
  • 會話層(5):負責管理會話,以支持通過多次傳輸連續交換信息
  • 表現層(6):將來自網絡服務的數據翻譯成應用層可用的格式,具體工作包括字符編碼轉換、數據壓縮、加密解密等
  • 應用層(7):提供高級API的人機交互層,應用能夠通過該層訪問網絡服務,如資源共享、遠程文件訪問等

其中,第 1 層是原始數據,第 2 層確定目標機器的 MAC 地址,第 3 層確定終點的 IP 地址,以及途經的具體路線,到第 4 層,要根據傳輸協議確定目標端口號,第 5~7 層不關心終點,因為 IP 地址 + MAC 地址 + 端口號已經唯一確定了目標應用程序.
也就是說,一個 HTTP 請求必須經由這些層才能到達目標服務器,那么,理論上,在第 2~7 層中的任意一層都有機會變更終點,實現負載均衡。而常見的負載均衡機制多實現在第 4 層和第 7 層。

2 層、3 層負載均衡

  • 2 層負載均衡:根據源/目標 MAC 地址進行分發,例如將虛擬 MAC 地址根據既定策略映射到實際 MAC 地址
  • 3 層負載均衡:根據源/目標 IP 地址,以及第 2 層信息進行分發,例如解析虛擬 IP(Virtual IP address)

越靠近底層,所能用來進行分發決策的信息越少,所以 2 層負載均衡的實際用途有限,常見的只有冗余網關協議(如GLBP、VRRP)和鏈路聚合(Link aggregation,也叫 etherchannel)等。

3/4 層負載均衡

4 層負載均衡基于傳輸層(第 4 層)信息進行請求分發,包括源/目標 IP 地址,以及數據包頭部的端口號,但不考慮數據包內容:

第4層負載平衡使用在網絡傳輸層(第4層)定義的信息作為決定如何在一組服務器之間分發客戶端請求的基礎。 具體來說,對于Internet流量,第4層負載平衡器根據包頭中記錄的源和目標IP地址以及端口來做出負載平衡決策,而不考慮包的內容

客戶端將將負載均衡器的 IP 地址作為目標 IP 地址發起請求,4 層負載均衡器收到請求后,對數據包進行NAT轉換,將目標 IP 地址修改成實際服務器的地址,在將服務器響應轉發給客戶端之前,負載均衡器再將源 IP 地址改成自身的 IP 地址。類似的,對數據包中的源/目標端口號也以這種方式進行修改。
第 4 層負載均衡器通常是專用的硬件設備,NAT 操作可能會由專用芯片來完成。
與更復雜的 7 層負載均衡相比,4 層負載均衡所需的計算更少,但在目前的硬件條件下,由此帶來的性能優勢已經不重要了。嚴格來講,4 層負載均衡應該叫 3/4 層負載均衡,因為結合了第 3 層的 IP 地址和第 4 層的端口號信息

7 層負載均衡

第7層負載平衡器根據HTTP頭的各種特征和消息的實際內容(例如URL、數據類型(文本、視頻、圖形)或cookie中的信息)來決定路由。
比起 4 層負載均衡,7 層負載均衡可以讀取請求和響應內容,所需的計算雖然更多,但不見得比 4 層負載均衡性能更差,因為擁有更全面的上下文信息,可以在此基礎上進行更聰明的全局決策(比如剔除慢速連接、重定向超時請求),甚至還能對內容進行優化(比如壓縮),從而提高性能。
嚴格來講,7 層負載均衡應該叫 5~7 層負載均衡,因為結合了 OSI 模型中 5~7 層的相關信息:

總結

以上是生活随笔為你收集整理的后台系统可扩展性学习笔记(五)负载均衡的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。