日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

nginx反向代理配置+lnmp优化+七层负载upstream+keepalived

發(fā)布時間:2023/12/29 编程问答 47 豆豆
生活随笔 收集整理的這篇文章主要介紹了 nginx反向代理配置+lnmp优化+七层负载upstream+keepalived 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

反代服務器取得內容緩存到本地,然后加速返回給客戶端。

緩存命中率高 可以極大的緩解后端服務器壓力。影響nginx

一般nginx作為負載均衡器,不會讓nginx反向代理去緩存。而是讓緩存服務器去緩存。

1.web服務
2.反代
3.偽四層


nat只負責轉發(fā)過去

但是代理是轉述 需要修飾的

nginx既要當成服務端接受用戶請求
也要當成客戶端去訪問互聯(lián)網

可以理解用戶請求的具體信息
并且可以緩存到本地

代理需要監(jiān)聽在套接字上,并且理解這個協(xié)議。

代理就是雙面人



后端真實主機



nginx代理服務器


這個作為反向代理服務器


自己配置一個虛擬主機

自己不是web服務器 所以不需要root
直接反代到后端主機

直接反代即可

注意:如果后端代理有多個虛擬主機
proxy_pass就基于ip+端口+或者主機名




如果直接訪問Ip就是代理服務器本身的

本機的包是從代理服務器發(fā)送過來的


在啟動一個新的后端服務器


默認發(fā)布頁面


這個緩存圖片



希望圖片到第二臺服務器




網關聯(lián)系不到后端服務器
可能是沒有啟動



有了這個功能 動靜分離就沒問題了

不加/意思是只要訪問/下的比如/index.html就補充到80后面192.16.10.11/index.html

表示只是把/admin/和圖片代理了



后端主機添加目錄/admin/



就是把整個路徑傳到后面去了


添加/
以為訪問/admin/的時候會替換為后端主機/下的內容



這種加不加沒有區(qū)別


正則無法替換
如果在80后面加/就會nginx -t語法錯誤

ngx_http_proxy_module模塊:The ngx_http_proxy_module module allows passing requests to another server.1、proxy_pass URL;Context: location, if in location, limit_except注意:proxy_pass后面的路徑不帶uri時,其會將location的uri傳遞給后端主機;server {...server_name HOSTNAME;location /uri/ {proxy http://hos[:port];}...}http://HOSTNAME/uri --> http://host/uri proxy_pass后面的路徑是一個uri時,其會將location的uri替換為proxy_pass的uri;server {...server_name HOSTNAME;location /uri/ {proxy http://host/new_uri/;}...}http://HOSTNAME/uri/ --> http://host/new_uri/ 如果location定義其uri時使用了正則表達式的模式,或在if語句或limt_execept中使用proxy_pass指令,則proxy_pass之后必須不能使用uri; 用戶請求時傳遞的uri將直接附加代理到的服務的之后;server {...server_name HOSTNAME;location ~|~* /uri/ {proxy http://host;}...}http://HOSTNAME/uri/ --> http://host/uri/; 意思就是請求時什么 后面就必須時補在后面的而不是替換

一般用戶訪問后端知識服務器  代理服務器構建后發(fā)給后端服務器 后端真實服務器不知道是客戶是誰
所以代理服務器可以修改報文首部 就是發(fā)往后端服務端的首部的值  添加客戶首部IP
或者響應報文發(fā)給客戶端的首部

2、proxy_set_header field value;設定發(fā)往后端主機的請求報文的請求首部的值;Context: http, server, locationproxy_set_header X-Real-IP $remote_addr;proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 實際用這個


后端抓包看包的首部信息


該日志格式



本來時%h也就是代理服務器的IP值
現在更換為上面定義的變量 就是客戶端的IP



可以看到真正的客戶端IP

ngx_http_headers_module模塊
還可以更改代理服務器響應給客戶端的時候
送給客戶端的

ngx_http_headers_module模塊The ngx_http_headers_module module allows adding the “Expires” and “Cache-Control” header fields, and arbitrary fields, to a response header.向由代理服務器響應給客戶端的響應報文添加自定義首部,或修改指定首部的值;1、add_header name value [always];添加自定義首部;add_header X-Via $server_addr;add_header X-Accel $server_name;


代理還可以啟動緩存進行加速哦~~



這個是代理服務器發(fā)送客戶端報文允許哪些首部是可以發(fā)送過去的

代理還可以啟動緩存進行加速哦~~

到后端取回來后放在本地磁盤

直接兩個網絡IO變成了一個磁盤IO


緩存還是文件路由哈希格式 更快 從右而左截取路由編碼
找文件首先哈希 然后找很快 在內存哈希表

而后端真實的服務器還是遍歷根目錄

緩存空間需要先定義 哪個路徑proxy_pass需要緩存 直接調用即可

只有get,head才需要緩存中查看 Post,put,delete不需要

shift+F5強刷 不讀取緩存

服務器端也可以發(fā)送報文說不需要緩存

緩存空間有限

后端服務器宕機 緩存不新鮮了

nginx不是高檔的 只有varnish才可以緩存的很得體 高效的緩存機制

nginx varnish裝載同一臺主機 解決網絡IO延遲


nginx啟動緩存功能

3、proxy_cache_path定義可用于proxy功能的緩存;Context: http proxy_cache_path path [levels=levels] [use_temp_path=on|off] keys_zone=name:size [inactive=time] [max_size=size] [manager_files=number] [manager_sleep=time] [manager_threshold=time] [loader_files=number] [loader_sleep=time] [loader_threshold=time] [purger=on|off] [purger_files=number] [purger_sleep=time] [purger_threshold=time];4、proxy_cache zone | off;指明要調用的緩存,或關閉緩存機制;Context: http, server, location5、 proxy_cache_key string;緩存中用于“鍵”的內容;默認值:proxy_cache_key $scheme$proxy_host$request_uri;6、proxy_cache_valid [code ...] time;定義對特定響應碼的響應內容的緩存時長;定義在http{...}中;proxy_cache_path /var/cache/nginx/proxy_cache levels=1:1:1 keys_zone=pxycache:20m max_size=1g;定義在需要調用緩存功能的配置段,例如server{...};proxy_cache pxycache;proxy_cache_key $request_uri;proxy_cache_valid 200 302 301 1h;proxy_cache_valid any 1m;


放在http中 在默認配置中寫

定義緩存路徑(磁盤空間) levels頂級子目錄級別 設置三級 每級16個 keys_zone內存分配多大空間 size 10M
max_size磁盤空間最多2g 其他默認


按需創(chuàng)建

調用緩存

調用緩存名字
定義緩存內容類型
以及定義緩存參數
proxy_cache_key定義緩存的Key 有默認的值
對那種方法調用緩存
最少時間緩存項訪問次數
use_stale 對于后端服務器處于什么問題下緩存哪些內容什么情況下還可以使用


網頁訪問主頁
這就是文件路由
可以看到相應信息

nginx也需要處理動態(tài)服務請求

nginx無法內建php模塊
處理動態(tài)的頁面只有fpm-server
找一臺主機運行fpm nginx反代給后端 基于fastcgi_module反代給后端fastcgi模塊 作為客戶端
而fast_proxy_pass則是作為http客戶端

所以構建lnmp


所以這就是三級結構

本地 只要不是.php結尾

.php就是用fastcg協(xié)議i反代給后端 fpm-server
加載完畢運行結果響應給前端主機

需要基于驅動訪問數據 基于mysql協(xié)議去訪問Mysql server

lnmp

fcgi server 需要接受請求還要處理并發(fā) 還要運行壓力很大
所以不如使用AP 代替 aapche工作模式 event preforx worker


但是Mysql讀取數據很慢
也可以給數據庫緩存 memcache 專門的緩存服務器 內存級別
基于內存緩存 支持的數據結構太簡單 所以被redis碾壓 還支持數據存儲



還可以搞個動靜分離 靜態(tài)的專門去處理靜態(tài)的頁面

搭建lnmp

一臺主機nginx 處理靜態(tài)內容

php內容發(fā)送給fpm-server
一臺主機安裝apahce + php

php-fpm server + mysql

但是phpMY 有靜態(tài)有動態(tài) 所以放在動態(tài)的主機也不容易配置


配置fpm-server


不然別的主機連接不進來了


允許所有連接


定義進程數


健康狀態(tài)檢測也啟動


因為進程屬組是apache


php需要文件保存會話 用戶信息等

所以該文件用戶也應該是apache



n1主機設置作為前端nginx

前面已經設置了很多


為了避免沖突

新建一個

index設置主頁

需要fastcgi_module作為客戶端進行反代


前面說到作為代理服務器 代理服務器會隱藏很多客戶端信息
但是[php服務器需要用戶信息 生成對應的內容
所以有一文件用來可以展示給php的客戶端信息
定義把什么參數傳輸給后端主機


腳本名稱
當客戶端請求一個腳本時候需要把腳本名稱傳遞到后端

但是用戶訪問的腳本名字 fastcgi如何獲取到該腳本呢 ?

所以需要有絕對路徑 但是一般不在這個 文件中修改


分別是fastcgi自己的主頁
腳本名稱對應再fastcgi服務器下的腳本所在位置
Include表示其他的變量從xx文件獲取

第一個location就是靜態(tài)內容
第二個location就是動態(tài)內容 表示.php都轉發(fā)



fpm主機p

獻給nginx配置靜態(tài)頁面





通過php連接mysql

php主機
vim /etc/my.cnf.d/server.cnf







隨機數


不是.php結尾
所以訪問index.php 就是主頁 但是沒有圖片 因為是靜態(tài)內容
所以拷貝到nginx主機上


同樣放到默認的根頁面下


所以正常 這也就意味著資源包括靜態(tài)和動態(tài)的話都需要一份

因為動靜分離了 數據庫用戶root 密碼就是安全設置設置的那個

繼續(xù)優(yōu)化 nginx不處理靜態(tài)內容 全部proxy_pass給一個專門處理靜態(tài)頁面的服務器
繼續(xù)添加主機



更改默認的根



報錯了 查看進程發(fā)現httpd服務啟動著




前端主機配置





可以看到請求了各種各樣的圖片文件

當然了fastcgi還可以啟動緩存優(yōu)化


指定路徑下 幾級優(yōu)化

客戶端壓測一下 隨便找一個另外的主機 172.16.0.67



壓測非常慢非常慢
因為是動態(tài)頁面

所以嘗試fastcgi的緩存功能


在http上下文添加

需要進行調用



先curl生成緩存




查看還是沒有緩存生成內容

可能生成私有信息
先注釋掉緩存


對默認頁面緩存

啟動緩存



速度大大提高

10、fastcgi_keep_conn on | off;
請求的時候保持連接打開



可以發(fā)現速度還是提升了





因為http協(xié)議和fastcgi協(xié)議并不完全兼容,所以很多變量的值向后方傳遞需要重新賦值
都可以實現緩存 1.定義緩存 2.調用緩存


主要就是講解了兩個反代模塊

nginx實現七層負載upstream實戰(zhàn)

nginx工作在strem模塊下就可以負載均衡四層的 其實就是stream下的upstream負載均衡tcp.udp協(xié)議請求的
nginx七層是工作在http的upstream模塊 http的upstream負載http請求 上有主機的方式
stream本身是反代 想要負載均衡就需要upsteam

haproxy既可以負載均衡也可以代理

如果后端是兩臺動態(tài)服務器
用戶請求分發(fā)到另外一臺主機之前的會話也沒有了
所以可以會話粘性:

根據用戶自身瀏覽行為 動態(tài)服務器本身可以會話緩存
一旦負載均衡
同一用戶輪詢 之前的會話信息就沒有了

解決
1.會話粘性 lvs: sh算法 或者persistence 基于源地址實現的
2.對應應用層可以基于cookie綁定
但是一臺服務器宕機了,session丟失
3.應該客戶端無狀態(tài)請求 會話集群 所有后端主機額外做集群
高性能的存儲專門存儲session 最好是內存級別的(memcache,redis)
連接后端存儲主機實現數據的增刪改查

memcache一旦宕機數據就沒有了
redis可以持久
但是還是單點

nginx是虛擬主機 訪問不同的資源去后端不同的主機 靜態(tài)資源去靜態(tài)資源服務器 動態(tài)資源去動態(tài)資源服務器
但是如果后端有2個靜態(tài)/動態(tài)資源服務器呢???? 可以在nginx的upstream定義為一組服務器
所以反向代理的時候可以指向一組 組自己有自己的挑選算法(類似于lvs)


一個虛擬主機的不同的location對應不同的組

web負載均衡集群


nginx的upstrem模塊自帶健康檢查功能,后端主機故障可以自動摘除~

但是nginx又單點了 所以可以加上keepalibed

server在http中是虛擬主機,在upstream中是后端真實主機






前端主機



先前的配置先備份一下,先配置簡單的



這是虛擬主機

在默認配置頁定義upstream




這就是負載均衡集群

還可以定義權重等等


先輪詢 至少都一邊 然后再加權





意思就是超時1次認為失敗 最多失敗三次就干掉

當兩個服務器都down
設置去訪問默認主頁


兩個都掛了就上


兩臺主機都停止服務


再次開啟服務
還可以偽裝down了實際并沒有 類似于灰度測試下


再次去掉down恢復正常

也支持sh會話粘性


添加ip_hash
下面的backup需要注釋



hash cookie就會把cookie當鍵

haproxy還支持很多種 講haproxy會講


吧來自同一個用戶發(fā)往同一個請求




一致性哈希!!

uri一定 適應與反代服務器

用uri的哈希值模2^32次方 范圍就在0~ 2^32-1

同理對服務器ip地址做哈希計算 也取模

順時針找離他近的服務器


當一個服務器宕機了
只影響一小段

但是如果服務器計算哈希離得很近很近


所以虛擬節(jié)點解決哈希環(huán)偏離
加鹽 一個加五十個鹽 那么3個節(jié)點150個點


這個就是自帶虛擬節(jié)點的一致性哈希


多生成頁面


分別生成20個頁面

對于同一個uri第一次綁定后面肯定都在一個服務器


ngx_http_upstream_module模塊 The ngx_http_upstream_module module is used to define groups of servers that can be referenced by the proxy_pass, fastcgi_pass, uwsgi_pass, scgi_pass, and memcached_pass directives.1、upstream name { ... }定義后端服務器組,會引入一個新的上下文;Context: httpupstream httpdsrvs {server ...server......}2、server address [parameters];在upstream上下文中server成員,以及相關的參數;Context: upstreamaddress的表示格式:unix:/PATH/TO/SOME_SOCK_FILEIP[:PORT]HOSTNAME[:PORT]parameters:weight=number權重,默認為1;max_fails=number失敗嘗試最大次數;超出此處指定的次數時,server將被標記為不可用;fail_timeout=time設置將服務器標記為不可用狀態(tài)的超時時長;max_conns當前的服務器的最大并發(fā)連接數;backup將服務器標記為“備用”,即所有服務器均不可用時此服務器才啟用;down標記為“不可用”;3、least_conn;最少連接調度算法,當server擁有不同的權重時其為wlc;4、 ip_hash;源地址hash調度方法;5、hash key [consistent];基于指定的key的hash表來實現對請求的調度,此處的key可以直接文本、變量或二者的組合;作用:將請求分類,同一類請求將發(fā)往同一個upstream server;If the consistent parameter is specified the ketama consistent hashing method will be used instead.示例:hash $request_uri consistent;hash $remote_addr;6、keepalive connections;為每個worker進程保留的空閑的長連接數量;

前面http服務的負載均衡都在http{}里面寫的 只能用來負載http服務

其余所有四層的代理都應該放在stream模塊中

自己無法處理四層服務 所以server必須都有真實的代理

包括http服務本身也可以在四層調度


舉了例子ssh服務


吧http的都刪除了

監(jiān)聽ssh服務 首先監(jiān)聽在22922
監(jiān)聽用戶發(fā)過來的ssh服務


這個時候就是四層反向代理

當然也可以代理web服務


定義負載均衡


web好驗證
輪詢的




只給一個數據庫創(chuàng)建mydb


可以發(fā)現也是輪詢的

關閉一個數據庫服務
發(fā)現也是有健康檢查功能哦


keepalived

一般需要奇數個 通過選舉選出新的leader

怎么把A干掉
ABC在電源交換機上
這個電源交換機可以通過網絡交換信號

多數的方可以干掉節(jié)點

BC選擇誰是Leader 向電源交換機發(fā)信號 切斷A的電源 或者閃一下A的電源

讓故障節(jié)點不要去訪問資源–FENCE


共享存儲前面添加一個信號 A要是干掉
共享存儲的需要屏蔽A的信號 不讓A去訪問資源

只有一方才可以代表集群工作稱為quorum機制

投票選舉是否大于半數

N個節(jié)點 M個服務
每個資源的傾向不同 x資源首先傾向于A。y資源傾向于B

在資源節(jié)點定義

A服務出問題優(yōu)先到C


以上是heartbeat
和keepalived不同

每個內網主機網關都指向虛擬VIP
多個路由器虛擬為一個虛擬路由器,通過VIP向外提供服務
這就是vrrp協(xié)議

路由網卡有優(yōu)先級高低,誰高Vip就在誰身上的

keepalived實現了軟件上就可以支持vrrp協(xié)議
vip配置在優(yōu)先級高的主機上
keepalied進程在用戶空間上,有幾個主機就有幾個keepalived進程。還支持健康檢查

IPVS wrapper生成規(guī)則 刪除宕掉的機器

核心組件:vrrp stack 實現vrrp協(xié)議的ipvs wrapper 生成ipvs規(guī)則的checkers 健康狀態(tài)檢測工具控制組件:配置文件分析器IO復用器內存管理組件keepalived監(jiān)控進程狀態(tài) 但是萬一自己的vrrp stack進程和checkers進程都掛了 所以有watchdog 用來監(jiān)控進程的進程 通常是個硬件設備 在主板上 內核驅動這個設備金控內核級進程

真正的通信是mac地址
VIP飄逸了 客戶端緩存的都是已經宕機的mac
所以不會再次發(fā)起解析請求 還是發(fā)給原來的主機
所以就需要虛擬MAC地址

再次廣播 自己問VIP的MAC地址是什么
免費ARP
其他主機自動更新本地MAC 就是新的路由!!!!

優(yōu)先級高的如果正常了 是否需要搶回VIP

可以配置不同的虛擬路由支持不同的服務的優(yōu)先級主機不同


如果又來了一個keepalive說自己是最高優(yōu)先級
但是不可信的
所以需要認證 組播的

keepalived:vrrp協(xié)議的軟件實現,原生設計的目的為了高可用ipvs服務:基于vrrp協(xié)議完成地址流動;為vip地址集群的節(jié)點生成ipvs規(guī)則(在配置文件中預先定義);為ipvs集群的各RS做健康狀態(tài)檢測;基于腳本調用接口通過執(zhí)行腳本完成腳本中定義的功能,進而影響集群事務;(nginx,haproxy等需要)組件:核心組件:vrrp stackipvs wrappercheckers控制組件:配置文件分析器IO復用器內存管理組件 HA Cluster的配置前提:(1) 各節(jié)點時間必須同步;ntp, chrony(2) 確保iptables及selinux不會成為阻礙;(3) 各節(jié)點之間可通過主機名互相通信(對KA并非必須);建議使用/etc/hosts文件實現; (4) 確保各節(jié)點的用于集群服務的接口支持MULTICAST通信;D類:224-239

關閉iptabels

關閉firewalld服務

放行多播信息即可


多播功能需要打開

keepalived安裝配置:CentOS 6.4+ 隨base倉庫提供; 程序環(huán)境:主配置文件:/etc/keepalived/keepalived.conf主程序文件:/usr/sbin/keepalivedUnit File:keepalived.serviceUnit File的環(huán)境配置文件:/etc/sysconfig/keepalived




分別是全局配置
VRRP配置
LVS配置

配置文件組件部分:TOP HIERACHYGLOBAL CONFIGURATIONGlobal definitionsStatic routes/addressesVRRPD CONFIGURATIONVRRP synchronization group(s):vrrp同步組;確保吧VIP放在同一個節(jié)點的主機上VRRP instance(s):每個vrrp instance即一個vrrp路由器;LVS CONFIGURATIONVirtual server group(s)Virtual server(s):ipvs集群的vs和rs;

組播地址

默認smtp是開啟的

配置語法:配置虛擬路由器:vrrp_instance <STRING> {....}專用參數:state MASTER|BACKUP:當前節(jié)點在此虛擬路由器上的初始狀態(tài);只能有一個是MASTER,余下的都應該為BACKUP;interface IFACE_NAME:綁定為當前虛擬路由器使用的物理接口;virtual_router_id VRID:當前虛擬路由器的惟一標識,范圍是0-255;priority 100:當前主機在此虛擬路徑器中的優(yōu)先級;范圍1-254;advert_int 1:vrrp通告的時間間隔;authentication {auth_type AH|PASSauth_pass <PASSWORD>}virtual_ipaddress {<IPADDR>/<MASK> brd <IPADDR> dev <STRING> scope <SCOPE> label <LABEL>192.168.200.17/24 dev eth1192.168.200.18/24 dev eth2 label eth2:1}track_interface {eth0eth1...}配置要監(jiān)控的網絡接口,一旦接口出現故障,則轉為FAULT狀態(tài);nopreempt:定義工作模式為非搶占模式;preempt_delay 300:搶占式模式下,節(jié)點上線后觸發(fā)新選舉操作的延遲時長;

VIP 配置綁定在哪個接口上interface
同一個虛擬路由器的id需要一樣
默認1秒向外通告一次 自己的優(yōu)先級和心跳信息等
pass只要是一樣的即可

虛擬VIP格式
ip 指明在eno16xxx設備上 別名

多個地址的多播地址一樣 就在一個域內
只要一樣的即可

默認搶占式


node1優(yōu)先級高 所以會搶占



同理 主節(jié)點關閉服務 VIP又飄逸回去

可以看到多播信息 一秒鐘發(fā)送一個

通過查看多播地址的信息查看抓包情況

1秒一個 host指定主機地址
備用節(jié)點也可以收到


關閉node1


node2自己通告 可以看到優(yōu)先級

再次開啟node1 的服務

這就是vRRp

雙主模型—主備和備主

再高一個虛擬路由器

不同的密碼

這個虛擬路由器配置node2的優(yōu)先級高,優(yōu)先級低

給node2復制






可以看到兩組都在通報


都變成優(yōu)先級高的了

man keepalived.conf

配置和演練

通知腳本的使用方式:示例通知腳本:#!/bin/bash#contact='root@localhost'notify() {local mailsubject="$(hostname) to be $1, vip floating"local mailbody="$(date +'%F %T'): vrrp transition, $(hostname) changed to be $1"echo "$mailbody" | mail -s "$mailsubject" $contact}case $1 inmaster)notify master;;backup)notify backup;;fault)notify fault;;*)echo "Usage: $(basename $0) {master|backup|fault}"exit 1;;esac 腳本的調用方法:notify_master "/etc/keepalived/notify.sh master"notify_backup "/etc/keepalived/notify.sh backup"notify_fault "/etc/keepalived/notify.sh fault"

文本粘貼進去


-p保留權限

Node1 和node2都先保留一份keepalved雙主模型的

然后把keepalived只保留一個虛擬路由

:.,$d

man keepalived.conf

添加幾條新參數

腳本的調用方法:notify_master "/etc/keepalived/notify.sh master"notify_backup "/etc/keepalived/notify.sh backup"notify_fault "/etc/keepalived/notify.sh fault"




開啟一個節(jié)點

發(fā)現沒有發(fā)送郵件


node1搶占

但是納悶的是郵件沒有發(fā)送出來


都加上雙引號

停止服務 開啟服務(node2)


node1開啟

就是因為引號的問題 沒有把后面的參數識別 所以需要加上

后續(xù)可以把這個通知腳本 使用python寫等等 網上有多種

默認keepalived是為lvs設計的

lvs規(guī)則在兩個keepalived上都有

再次開啟兩個RS 172.16.0.6 和172.16.0.7


時間同步




都開啟







定義虛擬服務器

配置后端主機都down了訪問頁面




虛擬服務器:配置參數:virtual_server IP port |virtual_server fwmark int {...real_server {...}...}常用參數:delay_loop <INT>:服務輪詢的時間間隔;lb_algo rr|wrr|lc|wlc|lblc|sh|dh:定義調度方法;lb_kind NAT|DR|TUN:集群的類型;persistence_timeout <INT>:持久連接時長;protocol TCP:服務協(xié)議,僅支持TCP;sorry_server <IPADDR> <PORT>:備用服務器地址;real_server <IPADDR> <PORT>{weight <INT>notify_up <STRING>|<QUOTED-STRING>notify_down <STRING>|<QUOTED-STRING>HTTP_GET|SSL_GET|TCP_CHECK|SMTP_CHECK|MISC_CHECK { ... }:定義當前主機的健康狀態(tài)檢測方法;}


判斷后端主頁校驗碼是否一樣 這種要求更嚴格


nb_get_retry 3 重試3次
delay_before_retry :重試之前的延遲時長;
connect_timeout :連接請求的超時時長;



node2配置也是一樣的


兩邊都先關閉服務







ipvs規(guī)則兩邊都有
只是誰有VIP誰提供服務









curl就是默認主頁了



服務都開啟就又成功了

都關閉keepalived服務 配置雙主模型


之前備份的文件


.,$ w >> /etc/xx


成功追加了


node2同樣追加進去




沒有98是因為98沒有使用別名



是nginx主頁


因為沒有定義98是VIP 也沒有定義98 是集群服務

后端RS需要給lo:1上添加98為vip
配置文件再添加一組98

比較麻煩 先不定義了

使用TCP檢測


開啟服務



0.7主機是TCP檢測方式

健康狀態(tài)檢測成功



TCP方法也很簡單

real_server可以通過notify_up 或者down發(fā)郵件去檢測

當然可以使用zabbix監(jiān)控更好

keepalived與nginx實現高可用故障轉移實戰(zhàn)

使用keepalived高可用nginx

lvs比較麻煩
所以多使用Nginx或者haproxy工作在四層代理

nginx代理
外部網卡做成流動地址,通過VIP接受用戶請求

后端請求也只響應給nginx的內網地址即可

后端主機使用私網地址
nginx兩個接口
keepalived在Nginx主機做

重新開始配置
兩臺nginx主機 都是 一個對外接口 一個對內Ip



內部的RS 使用一臺主機即可 虛擬為多臺
所以需要添加多個IP





編輯默認主頁


三個一樣


測試虛擬主機


只要確保倆個nginx服務啟動著(類似于lvs的規(guī)則) VIP飄逸過來即可使用

keepalived調用外部的輔助腳本進行資源監(jiān)控,并根據監(jiān)控的結果狀態(tài)能實現優(yōu)先動態(tài)調整;分兩步:(1) 先定義一個腳本;(2) 調用此腳本;vrrp_script <SCRIPT_NAME> {script ""interval INT weight -INT }track_script {SCRIPT_NAME_1SCRIPT_NAME_2...}

檢測腳本檢測
如果檢測失敗了 立刻減去權重

通過腳本監(jiān)控完成資源轉移

主不下線 降權 就可以把VIP給備節(jié)點了



兩個節(jié)點都安裝

嫌麻煩,可以把上面的keepalived文件復制過來




把地址修改下




腳本也復制過去

期待通過腳本完成VIP轉移 而不是直接停掉服務 比如生產中主節(jié)點需要更新臨時下線

腳本先定義后調用

調用在vrrp_instance里面

判斷down文件是否存在 存在錯誤退出 不存在正確退出

腳本失敗了 降權 -10 小于備用節(jié)點即可

1秒檢測一次

跟蹤腳本結果 tract_script






刪除腳本又回來了



可以借助腳本監(jiān)控Nginx服務


nginx做反代服務




先手動測試下能否成功


現在定義誰是主節(jié)點誰就開啟nginx服務
備用節(jié)點就把Nginx服務關閉
就在notify.sh腳本中添加

現在查看Ip發(fā)現Node1 是keepalived節(jié)點 VIP在




所以通過外部的通知腳本完成輔助功能

刪除down




所以這個就是通知腳本的作用

通過通知腳本的建立來降低優(yōu)先級權重實現VIP漂移到備節(jié)點
備節(jié)點成為主節(jié)點后執(zhí)行notify master 激活 開啟nginx服務 并且發(fā)送郵件

但是一般別讓nginx服務停掉









nginx會自動狀態(tài)檢測

添加腳本監(jiān)控Nginx進程完成降級














干掉nginx 或者開啟http沖突

看能否轉走VIP

兩邊都修改

多失敗幾次

都停掉keepalived服務








地址轉移



nginx


可以發(fā)現啟動不起來nginx服務
因為轉成備用節(jié)點 已經觸發(fā)了

需要手動開啟






先關閉 確保80端口沒有倍監(jiān)聽


優(yōu)先級也降低了



刪除down也回不來 因為自己是96 對方是100了


高可用nginx

雙主模型





node1拿到77的地址 node2拿到78的地址

嘗試dns主機名解析到這兩個VIP即可

檢測健康




這就是keepalived高可用Nginx 生產中常用
還可以高可用haproxy哦
或者mysql的高可用

總結

以上是生活随笔為你收集整理的nginx反向代理配置+lnmp优化+七层负载upstream+keepalived的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

久草香蕉在线视频 | 免费久久久久久 | 日韩视频一区二区三区在线播放免费观看 | 久插视频 | 国产精品一码二码三码在线 | 国产精品资源在线观看 | 国产一区二区不卡视频 | 久久成人欧美 | 在线观看av不卡 | 成年人黄色免费网站 | 在线国产中文字幕 | 亚洲黄色在线免费观看 | 欧美激情视频一区 | 亚洲欧洲一区二区在线观看 | 成年一级片 | 免费在线电影网址大全 | 国产不卡一 | 国产亚洲精品成人 | 在线视频99 | 欧美一级免费高清 | 国产亚洲在 | 欧美国产日韩在线观看 | 国产第一页福利影院 | 成人免费av电影 | 国产高清中文字幕 | 婷婷久久久 | 欧美xxxx性xxxxx高清 | 99久久精品费精品 | 亚洲黄色在线观看 | 日产av在线播放 | 国产午夜三级一区二区三桃花影视 | 亚洲成人av影片 | 久久精品导航 | 中文字幕乱在线伦视频中文字幕乱码在线 | 在线观看日本韩国电影 | 久久免费视频一区 | 99久久国产免费,99久久国产免费大片 | 91九色视频导航 | 欧美专区亚洲专区 | 日韩精品一区二区三区第95 | 日日弄天天弄美女bbbb | 亚洲国产精品电影在线观看 | 亚洲欧美在线视频免费 | 成片人卡1卡2卡3手机免费看 | 国产成人精品国内自产拍免费看 | 国产精品久久久777 成人手机在线视频 | 日韩在线在线 | 亚洲一区二区观看 | 国产欧美精品一区二区三区 | 在线 高清 中文字幕 | 国产精品久久久久久久久久99 | 在线你懂的视频 | 91免费网站在线观看 | 国产精品视频99 | 中文字幕中文字幕在线中文字幕三区 | 成人免费观看视频大全 | 日韩激情久久 | 黄色一级大片在线免费看国产一 | 欧美日韩首页 | 国产在线欧美 | av丝袜美腿 | 国产激情久久久 | 免费在线观看av网站 | 中文字幕欧美日韩va免费视频 | 婷婷去俺也去六月色 | 亚洲h视频在线 | 免费色网 | 91夫妻视频 | 香蕉免费 | 国产视频丨精品|在线观看 国产精品久久久久久久久久久久午夜 | 99国产视频 | 波多野结衣在线观看一区二区三区 | 国产精品白虎 | 欧美 激情在线 | 亚洲午夜不卡 | 91人人射 | 天无日天天操天天干 | 天天干一干 | 激情五月播播久久久精品 | 欧美精品v国产精品v日韩精品 | 欧美色图p | 麻豆国产精品永久免费视频 | 久久不卡免费视频 | 国产免费久久久久 | 亚洲午夜精品久久久 | 欧美日韩一区二区在线 | 亚洲精品乱码久久久久久蜜桃动漫 | www.天天射 | 国产精品亚洲片夜色在线 | 欧美日韩在线播放一区 | 日韩高清免费在线 | 久久久免费观看 | 国产亚洲精品成人av久久ww | 欧美成人区 | 美女黄色网在线播放 | 亚洲精品乱码久久久久久按摩 | 午夜在线资源 | 99在线免费观看视频 | 欧美精品国产综合久久 | 日韩在线视频在线观看 | 超碰成人网 | 久久99精品久久久久久三级 | 最新中文字幕 | 免费色视频网站 | 五月婷婷播播 | 国产网红在线观看 | 日批视频在线 | 久草视频免费播放 | 日本久久久久久科技有限公司 | 久久久91精品国产一区二区三区 | 超碰在线97国产 | 国产一区二区三区在线 | 国产又粗又猛又黄又爽视频 | 精品国模一区二区三区 | 日韩免费福利 | 日韩中文字幕国产精品 | 欧美a级在线 | 99久久久久 | 欧美精品第一 | 在线播放国产一区二区三区 | 日本中文一级片 | 一本一本久久aa综合精品 | 久久久91精品国产一区二区精品 | 欧美日韩一区二区在线观看 | 日韩免 | 91精品中文字幕 | 久久久精品福利视频 | 麻豆视频在线 | 国产精品自产拍在线观看 | 中文字幕观看在线 | 久久久不卡影院 | 午夜影院一级片 | 欧美十八| 99在线热播精品免费99热 | 天天干夜夜爱 | 天天综合网 天天 | www.大网伊人 | 久久精品波多野结衣 | 午夜三级大片 | 日韩在线播放av | 亚洲免费小视频 | 日本3级在线观看 | 超碰97久久 | 色资源网免费观看视频 | 欧美日韩国产网站 | 五月天综合网站 | 婷婷久草 | 人人爽人人澡人人添人人人人 | 午夜精品一区二区三区在线视频 | 久久久久网站 | 日韩激情精品 | 天天干夜夜擦 | av一级片 | 精品国产伦一区二区三区观看体验 | 精品美女久久久久 | 黄色毛片视频免费观看中文 | 激情网色| 欧美精品久久99 | 国产片免费在线观看视频 | 亚洲一区二区三区精品在线观看 | 天天干天天干天天干天天干天天干天天干 | 日韩精品观看 | av中文字幕不卡 | 美女网站色免费 | 欧美午夜一区二区福利视频 | 色婷婷九月 | 国产精品毛片一区视频 | 欧美男女爱爱视频 | 高清有码中文字幕 | 一区二区 不卡 | 玖玖爱国产在线 | 中文字幕一区二区三区久久蜜桃 | 国产麻豆精品久久一二三 | 亚洲欧美成人网 | 性色av免费看 | 亚洲在线高清 | 国产在线观看免费av | 91精品国产九九九久久久亚洲 | 黄av免费 | 91最新在线视频 | 在线观看视频免费大全 | 97精品超碰一区二区三区 | 欧美日韩中文字幕在线视频 | 91麻豆精品国产午夜天堂 | 婷婷99| 狠狠综合网 | 欧美一区二区三区在线看 | 美女久久久| 国产伦理久久精品久久久久_ | 中国精品一区二区 | 久久激情视频 久久 | 天天摸天天舔天天操 | 国产黄网在线 | 日韩一级理论片 | 国产人成精品一区二区三 | 2021av在线 | www黄在线| 色婷婷av一区二 | 日韩在线欧美在线 | 99久久99久久精品国产片 | 欧美极品一区二区三区 | 国产成人一区二区三区在线观看 | 亚洲天天草 | 国产又粗又猛又黄又爽的视频 | 中文字幕第一页在线视频 | 亚洲精品国产区 | 亚洲精品 在线视频 | 黄色com| 丁香九月婷婷综合 | 亚洲综合在线观看视频 | www国产精品com | 精品国产电影 | 黄色www免费 | 一级片色播影院 | 国产r级在线观看 | 91视视频在线直接观看在线看网页在线看 | 欧美一级在线看 | ww亚洲ww亚在线观看 | 中文资源在线播放 | 国产三级午夜理伦三级 | 青青河边草免费直播 | 丁香综合激情 | av导航福利 | 国产成人在线观看 | 亚洲视频1区2区 | 日av免费| 在线免费中文字幕 | 国产精品久久久久aaaa九色 | 天天操天天拍 | 亚洲精品国产视频 | 久久婷亚洲五月一区天天躁 | 天天射夜夜爽 | 欧美日韩久久不卡 | 亚洲国产精品久久久久婷婷884 | 国产你懂的在线 | 亚洲精品在线资源 | 久久免费视频2 | 久久久免费毛片 | 久久9999久久 | 成人一级在线观看 | 国精产品一二三线999 | av观看免费在线 | 在线观看激情av | 日韩城人在线 | 狠狠色丁香婷综合久久 | 碰碰影院 | 久久综合婷婷 | 久久久精品在线观看 | 91亚洲精品乱码久久久久久蜜桃 | 亚洲精品乱码久久久久久蜜桃欧美 | 狠狠色丁香婷婷综合视频 | 激情综合六月 | www.香蕉视频 | 欧美另类一二三四区 | 在线免费色视频 | 成人国产精品久久久 | 久久精品波多野结衣 | 国产成人精品一区二三区 | 欧美精品一区二区三区一线天视频 | 99草在线视频 | se婷婷| 草久草久 | 天天干,天天射,天天操,天天摸 | 中文字幕在线精品 | 在线免费高清一区二区三区 | 国产亚洲精品久久久久动 | 黄色网在线免费观看 | 国产在线观看二区 | 中文字幕乱在线伦视频中文字幕乱码在线 | 亚洲精品女人 | 久久久精品欧美一区二区免费 | 亚洲精品动漫久久久久 | 亚洲乱亚洲乱妇 | 国产伦理久久 | 国产高清网站 | 伊人在线视频 | 日韩免费观看一区二区 | 涩涩网站免费 | 精品视频免费观看 | 午夜精选视频 | 狠狠网| 欧美日韩三级 | 亚洲综合视频在线观看 | 97夜夜澡人人爽人人免费 | 国产在线观看中文字幕 | 欧美激情综合五月色丁香小说 | 国产精品18videosex性欧美 | 91在线播放国产 | 天天弄天天操 | 蜜臀av免费一区二区三区 | 麻豆果冻剧传媒在线播放 | 制服丝袜在线 | 视频国产一区二区三区 | 亚州国产视频 | 国产精品12| 国产一级a毛片视频爆浆 | 国产黄免费在线观看 | 日韩在线一区二区免费 | av网站在线观看播放 | 五月开心六月伊人色婷婷 | 日本中文字幕网址 | 精品免费视频123区 午夜久久成人 | 国产成人香蕉 | 久久精品79国产精品 | 最新av在线免费观看 | 久久免费视频在线观看30 | 亚洲精品资源在线观看 | 久久高清免费观看 | 国产精品久久久久久久久久三级 | 亚洲精品免费在线观看视频 | 97精品欧美91久久久久久 | 国内精品久久久久久久久久久 | 日本精品视频免费 | 日韩精品高清不卡 | 黄视频色网站 | 国产精品久久伊人 | 国产一级特黄电影 | 日韩一级精品 | 99精品电影 | 婷婷av电影 | 国产亚洲一区二区在线观看 | 国产 日韩 在线 亚洲 字幕 中文 | 又黄又爽又无遮挡的视频 | 香蕉视频在线观看免费 | 三级a视频 | 国产不卡片| 狠狠操狠狠干天天操 | 日韩欧美视频 | 国产精品第10页 | 日日干夜夜操视频 | 天天操天天吃 | 国产在线观看高清视频 | 成人av电影免费在线播放 | 成人黄色大片在线免费观看 | a在线免费观看视频 | 国产精品国产亚洲精品看不卡15 | 在线观看中文字幕一区 | 免费观看成年人视频 | 日本精品久久久久中文字幕5 | 久久国产三级 | 欧美精品一二三 | 欧美日韩高清在线 | 91三级在线观看 | 91 在线视频| 免费在线观看国产黄 | www黄色大片| 国外调教视频网站 | 91精品国产成人www | 色是在线视频 | 国产高清日韩欧美 | 99视频在线观看视频 | 麻豆高清免费国产一区 | 9797在线看片亚洲精品 | a v在线视频 | 国产剧情久久 | 国产精品久久久久9999吃药 | 99九九视频| 中文字幕视频免费观看 | 美腿丝袜一区二区三区 | 一区二区电影在线观看 | 六月婷婷久香在线视频 | 91精品国产一区二区在线观看 | 色视频在线看 | 久久久久女人精品毛片 | 成人在线视频你懂的 | av色图天堂网 | 99久久99久久精品国产片 | 免费av网站观看 | 国产精品久久久久久久久久久免费看 | 欧美日韩一区二区在线观看 | 91精品国产乱码 | 成人一级影视 | 欧美日韩中文在线观看 | 成年人在线观看视频免费 | 国产精品成久久久久三级 | 网站你懂的 | 国产精品黄色av | 久久精品一二三区 | 久久精品第一页 | 欧美激情奇米色 | 久久免费99精品久久久久久 | 一二区电影| 久久婷婷影视 | 日本视频高清 | 亚洲精品永久免费视频 | 久热电影 | 久久看免费视频 | 免费观看视频的网站 | 黄色av电影免费观看 | www.国产视频| 国产一区免费 | 91最新视频 | 国产免费资源 | av九九九 | 五月婷在线 | 精品人人人人 | 国产精品丝袜久久久久久久不卡 | 免费观看的av网站 | 欧美资源 | 五月婷婷亚洲 | 探花视频网站 | 99国产精品一区 | 久久国产精品99久久久久久进口 | 深爱激情开心 | 国产精品美女久久久久久久网站 | 最新超碰在线 | 日韩中文字幕视频在线观看 | 麻豆91在线观看 | 伊人宗合网 | 97超碰成人在线 | 欧美99热| 又黄又爽又湿又无遮挡的在线视频 | 91精品视屏 | 国产精品亚洲视频 | 少妇bbb| 国产精品毛片一区视频播 | 亚洲成人网av | 日韩高清一二三区 | 免费看成人片 | 欧美精品久久 | 欧美午夜精品久久久久久浪潮 | 欧洲精品在线视频 | 久久久99久久 | 玖玖精品在线 | 18做爰免费视频网站 | 国产免费嫩草影院 | 国产一区二区三区 在线 | 懂色av一区二区三区蜜臀 | 视频成人 | 色婷婷电影网 | 久久九九久久 | 欧美精品在线一区二区 | 久久精品老司机 | 国产成人av福利 | 精品欧美一区二区在线观看 | 91麻豆看国产在线紧急地址 | 日韩免费一二三区 | 欧美伦理电影一区二区 | 日韩久久视频 | 欧美日韩国产二区三区 | 一区在线免费观看 | 91在线中文字幕 | 国产老太婆免费交性大片 | 日韩在线高清免费视频 | 综合在线观看色 | 亚洲天堂网在线观看视频 | 日本特黄一级片 | 国产精品手机播放 | 欧美精品一区二区三区一线天视频 | 久久久国产精品久久久 | 99re国产视频 | 国产一级视频在线 | 成人毛片在线视频 | 久久视频国产 | 91麻豆福利 | 国产高清福利在线 | 亚洲精品理论 | 亚洲欧洲久久久 | 日韩理论片中文字幕 | 91在线一区 | 伊人色**天天综合婷婷 | 福利视频第一页 | 亚洲国内精品在线 | 色视频国产直接看 | 欧美国产日韩在线观看 | 久久成人久久 | 亚洲区视频在线观看 | 精品日韩中文字幕 | 国产一级在线观看 | 韩国av三级 | 久久高清免费观看 | www视频在线免费观看 | 九九日九九操 | 亚洲aaa毛片| 91九色丨porny丨丰满6 | 91精品国产91 | 久草www| 蜜臀av网站 | 中文国产在线观看 | 免费黄色av. | 国产麻豆视频在线观看 | 91免费看黄色 | 久久成人一区 | 日本aa在线 | 欧美性受极品xxxx喷水 | 成人h动漫在线看 | 99精品视频在线观看 | 日韩欧美在线一区 | 亚洲国产免费av | 欧美一二三视频 | 极品久久久 | 日韩精品一区二区三区外面 | 麻豆精品在线 | 久久免费视频国产 | 男女激情片在线观看 | 日日夜夜天天 | 国产精品高 | 91九色网站 | 日本黄色大片免费 | 91视频在线免费下载 | 三级黄色欧美 | 久久久久久久久久久黄色 | 国产经典av | 日韩一区二区三区免费视频 | 国产精品永久在线 | 亚洲激情在线视频 | av黄免费看| 日韩高清一区在线 | av电影久久 | 国产黄免费 | 欧美夫妻性生活电影 | 午夜999| 91夫妻视频 | 婷婷成人在线 | 精品专区| 国产成本人视频在线观看 | 视频在线观看入口黄最新永久免费国产 | 亚洲欧洲精品一区 | av观看免费在线 | 在线成人小视频 | 中文一区二区三区在线观看 | www.色午夜,com | 狠狠操狠狠操 | 中文字幕在线中文 | 九色porny真实丨国产18 | 国产精品福利小视频 | 久久国产精品二国产精品中国洋人 | 国产精品成人一区二区 | 99国产在线观看 | 六月丁香六月婷婷 | 国产69久久精品成人看 | 91看片在线播放 | 久久艹艹| 超碰成人免费电影 | 天天操夜夜摸 | 国产美女精品人人做人人爽 | 亚洲 欧洲 国产 精品 | 中文字幕91 | 久久99国产精品视频 | 中文字幕视频一区二区 | 久久久久免费电影 | 国产精品999久久久 久产久精国产品 | 日韩av电影国产 | 综合色爱| 一区二区精品久久 | 欧美精品一区二区三区一线天视频 | 婷婷色社区| 国产美腿白丝袜足在线av | 欧美大片第1页 | 国产精品欧美久久久久天天影视 | 欧美aaa大片| 久久99久久99精品中文字幕 | 九九视频免费观看视频精品 | 欧美日韩精品在线观看视频 | 精品久久九九 | 亚洲综合色视频 | 色综合久久久久综合99 | 色资源中文字幕 | 国产 字幕 制服 中文 在线 | 中文字幕.av.在线 | 亚洲丝袜中文 | 在线观看中文字幕网站 | 激情五月在线视频 | 亚洲久草网 | 波多野结衣在线播放视频 | 亚洲精品免费视频 | 久久精品99| 日韩一级电影在线 | 在线免费观看黄 | 国产亚洲精品久久久久久久久久 | 国产成人精品在线 | 久久久久麻豆 | 国产成人免费观看 | 丁香婷婷射 | av高清网站在线观看 | 亚洲综合最新在线 | 国产一二三精品 | 国产精品视频久久 | 天天操天天干天天 | 伊人久久影视 | 国产免费美女 | 99久久久成人国产精品 | 日韩精品一区二区免费 | 国产精品毛片一区二区在线 | 波多野结衣资源 | 国产色就色 | 在线观看精品黄av片免费 | 免费观看9x视频网站在线观看 | 久久精品久久久久电影 | 色吊丝在线永久观看最新版本 | 99精品国产兔费观看久久99 | 美女网站黄免费 | 欧美日韩视频一区二区三区 | 四虎影视国产精品免费久久 | 成人高清在线观看 | 国产精品视频你懂的 | 婷婷色综 | 国产精品嫩草在线 | 国产精品美女在线观看 | 欧美一区二区三区四区夜夜大片 | 日韩在线视频线视频免费网站 | 视频一区二区在线观看 | 亚洲成a人片在线观看中文 中文字幕在线视频第一页 狠狠色丁香婷婷综合 | 日韩免费av网址 | 国产一区自拍视频 | 国产精品二区三区 | 色婷婷88av视频一二三区 | 国产精品欧美日韩 | 日批网站在线观看 | 中文字幕影片免费在线观看 | 黄色www在线观看 | 一区 二区电影免费在线观看 | 91自拍成人 | 婷婷四房综合激情五月 | 欧美日韩一级久久久久久免费看 | 久久婷婷一区二区三区 | 国产视频精品久久 | 欧美在线99 | 中文一区二区三区在线观看 | 久久综合九色综合网站 | 91香蕉视频色版 | 日本3级在线观看 | 天天曰天天射 | 欧美成人播放 | 国产一区二区三区 在线 | 亚洲在线视频免费观看 | 精品免费一区二区三区 | 中文久草 | 欧美91视频| 欧美乱熟臀69xxxxxx | 精品福利在线观看 | 国产精品都在这里 | 成人久久久电影 | 综合色中文 | 碰超在线观看 | 精品亚洲va在线va天堂资源站 | 欧美日韩国产综合一区二区 | 亚洲美女免费精品视频在线观看 | 国产高清av免费在线观看 | 国产精品美女久久久久久久久久久 | 在线观看成人av | 亚洲国产人午在线一二区 | 国产老熟 | 欧美精品一区二区三区四区在线 | 香蕉久久国产 | 永久免费毛片 | 国产一级二级在线播放 | 欧美成年性 | 成人免费大片黄在线播放 | 91桃色免费视频 | 91看片在线播放 | 欧美日韩性 | 久草免费在线观看 | 日韩精品在线看 | 国产精品永久在线观看 | 国内综合精品午夜久久资源 | 国产日韩精品一区二区三区 | 手机看片国产 | 免费视频在线观看网站 | 麻豆久久精品 | 天天躁日日躁狠狠躁av麻豆 | 国产精品理论视频 | 亚洲毛片视频 | 国产精品一区二区久久精品爱涩 | aaa毛片视频 | 99高清视频有精品视频 | av不卡在线看 | 亚洲日本在线一区 | 亚洲综合视频在线 | 91av看片 | 国产高清视频免费最新在线 | 国产手机免费视频 | 激情综合色图 | 免费观看一级 | 久久女同性恋中文字幕 | 日韩精品五月天 | 国产69精品久久99的直播节目 | 手机在线黄色网址 | av免费在线免费观看 | 欧美激情精品久久久 | 亚洲性少妇性猛交wwww乱大交 | 黄在线| 在线日韩av| 九九热只有这里有精品 | 在线国产欧美 | 日本黄色免费在线 | 久热国产视频 | 久久无码精品一区二区三区 | 亚洲免费永久精品国产 | 欧美日韩精品影院 | 国产精品高潮呻吟久久久久 | 国产视频一区二区在线观看 | 久草剧场| 亚洲综合色激情五月 | 韩国av一区 | 精品国产1区2区3区 国产欧美精品在线观看 | 日韩欧美一级二级 | 黄色网www | 中文字幕资源在线观看 | 五月婷婷开心 | 精品国产亚洲一区二区麻豆 | 欧美久久久影院 | 久久综合激情 | 免费在线观看黄色网 | 青青河边草免费观看 | 久久狠狠一本精品综合网 | 99久热精品| 最近中文字幕免费视频 | 91中文在线 | 成人综合婷婷国产精品久久免费 | 欧美黑人xxxx猛性大交 | 视频91 | 亚洲精品自在在线观看 | av电影免费在线 | 五月婷影院 | 91超在线| 国际精品久久久 | 日韩av一区二区在线播放 | 国产淫片 | 探花国产在线 | 91av视频免费在线观看 | 亚洲成人午夜在线 | 国产成人一区二区在线观看 | 久久免费视频这里只有精品 | 国产精品久久久久久久电影 | 麻花豆传媒mv在线观看 | 五月天网站在线 | 国内精品福利视频 | 99电影456麻豆 | 日韩深夜在线观看 | 免费能看的黄色片 | 国内一区二区视频 | 四虎影视成人永久免费观看视频 | 色婷婷狠| 国产无套精品久久久久久 | 欧美永久视频 | 亚洲欧美在线观看视频 | 国产精品久久久av久久久 | 久久99久| 97在线免费视频观看 | 欧美黑吊大战白妞欧美 | 在线观看91精品国产网站 | 欧美少妇18p | 91精品国产麻豆 | 九九精品视频在线观看 | 中文字幕乱码在线播放 | 免费人成在线观看 | 91一区啪爱嗯打偷拍欧美 | 久草免费新视频 | 精品久久久久久亚洲综合网站 | 深爱激情亚洲 | 成人av在线网址 | www.在线观看av| 九九影视理伦片 | 91av电影在线观看 | av大片网站| 亚洲综合婷婷 | 美女视频免费一区二区 | 久久综合欧美 | 久久九九精品 | 在线观看视频国产一区 | 国产精品一区久久久久 | 久久久免费少妇 | 欧美一级久久久久 | 久草在线在线视频 | 成年人app网址| 一级黄色毛片 | 综合久久网 | 91激情 | 亚洲天堂社区 | 亚洲午夜久久久久久久久电影网 | 日韩大片在线观看 | 精品久久九九 | 国产高清中文字幕 | 成人网444ppp | 免费中文字幕视频 | 国产精品99视频 | 亚洲免费在线看 | 500部大龄熟乱视频 欧美日本三级 | 免费99精品国产自在在线 | 成人国产综合 | 国产精品综合在线观看 | 成在线播放 | 日本黄色黄网站 | 亚洲精品玖玖玖av在线看 | 日本中出在线观看 | 国产免费一区二区三区最新6 | 久久亚洲视频 | 免费国产亚洲视频 | 又黄又爽又色无遮挡免费 | 午夜少妇一区二区三区 | 99久久99久国产黄毛片 | 一本色道久久综合亚洲二区三区 | 99精品视频99 | 激情一区二区三区欧美 | 天天插日日射 | 欧美a级在线播放 | 在线观看视频亚洲 | 超碰在线观看99 | 成人精品一区二区三区中文字幕 | 久久久久久久久久久影院 | 国产在线视频导航 | 亚洲少妇天堂 | 成人精品久久久 | 手机av观看 | 综合色亚洲 | 国产精品一区二区三区电影 | 国产伦精品一区二区三区照片91 | 久久伊人五月天 | 久久国产系列 | 欧美精品乱码久久久久久按摩 | 在线免费观看av网站 | 一级黄色电影网站 | 中文字幕免费观看视频 | 亚洲黄色app | 999日韩| 婷婷色在线播放 | 婷婷久操 | 九草视频在线观看 | 婷婷免费在线视频 | 91视频免费看 | 国产原创91 | 91成人精品观看 | 四虎影视成人永久免费观看亚洲欧美 | 少妇搡bbbb搡bbb搡69 | 中文字幕中文字幕在线中文字幕三区 | 日韩av有码在线 | 97视频入口免费观看 | a黄色影院| 六月天综合网 | 日韩二区三区在线观看 | 中文字幕在线播放一区 | 一区二区三区动漫 | 日韩精品久久久 | 在线观看日韩视频 | 久久久久久久久久免费视频 | 91超级碰| 中文字幕日本在线 | 成人欧美一区二区三区在线观看 | 亚洲在线国产 | 国内一级片在线观看 | 久久专区 | 亚洲一区久久久 | 日韩免费网址 | 奇米影视四色8888 | 蜜臀av性久久久久蜜臀aⅴ涩爱 | 日本精品视频一区 | 在线免费av观看 | 狠狠色丁香婷婷综合视频 | 国产九九在线 | 黄色亚洲片 | 久久久精品久久日韩一区综合 | 国外成人在线视频网站 | 丰满少妇高潮在线观看 | 久久久久免费 | 免费男女羞羞的视频网站中文字幕 | 欧美激情精品久久久 | 国产美女免费看 | 97视频免费看 | 国产色婷婷在线 | 久久久久久毛片精品免费不卡 | 91精品在线免费 | 国产精品一区二区免费在线观看 | 久久香蕉国产精品麻豆粉嫩av | 九九热re | 中文字幕av播放 | 国产一区二区手机在线观看 | 日韩精品第1页 | www.夜夜爽 | 精品夜夜嗨av一区二区三区 | 亚洲闷骚少妇在线观看网站 | 免费又黄又爽的视频 | 最近2019中文免费高清视频观看www99 | 久久久久久免费视频 | 福利视频一区二区 | 欧美精品在线一区 | 欧美一进一出抽搐大尺度视频 | 久久久久福利视频 | 色综合久久久网 | 日本动漫做毛片一区二区 | 色婷婷综合在线 | 欧美国产日韩久久 | 在线观看www91 | 欧美一区日韩精品 | 欧美成人h版电影 | 国产亚洲精品美女 | 99在线观看免费视频精品观看 | 日韩手机在线 | 久久精品国产免费 | 日韩有码在线播放 | 国产精品视频在线观看 | h动漫中文字幕 | 久久不卡视频 | 午夜精品久久久久久久99热影院 | 91综合色 | 亚洲毛片久久 | 亚洲免费在线播放视频 | 婷婷色视频 | 最新国产在线视频 | 精品v亚洲v欧美v高清v | 国产精品久久久久久欧美 | 日韩中文幕 | 97电影院在线观看 | 久久影视网 | 久久综合久久久久88 | 91视频久久久| av观看网站| 国产黄色成人 | 国产视频在线免费 | 日本资源中文字幕在线 | 六月丁香伊人 | 九色91在线视频 | 色综合a| 97人人添人澡人人爽超碰动图 | 综合久久婷婷 | 日韩在线免费视频 | 久久成视频 | 蜜臀精品久久久久久蜜臀 | 午夜黄色一级片 | 免费观看xxxx9999片 | 天天艹日日干 | 久久免费久久 | 97超碰人人看 | 亚洲激情影院 | 欧美成人h版电影 | 又黄又爽又无遮挡的视频 | 在线日韩视频 | 中文字幕制服丝袜av久久 | 日韩在线观看影院 | 亚洲精品777 | 丁香六月中文字幕 | 六月丁香在线观看 | 五月天高清欧美mv | 日韩高清免费观看 | 免费av的网站 | 久久久久一区二区三区四区 | 亚洲国产免费看 | 国色天香永久免费 | 91成年视频 | 亚洲欧美成人在线 | 欧美网址在线观看 | 精产嫩模国品一二三区 | 婷婷在线免费 | 手机av观看 | 婷婷色视频 | 另类老妇性bbwbbw高清 | 色美女在线 | 五月天综合色激情 | 国产麻豆传媒 | 国产在线观看av | 久久在线观看 | 国产无区一区二区三麻豆 | www四虎影院 | 黄色成年 | 国产亚洲精品久久久久久大师 | 五月综合在线观看 | 中文国产成人精品久久一 | 四虎影视4hu4虎成人 | 92中文资源在线 | 中文字幕乱码在线播放 | 91av在线免费播放 | 一区二区三区播放 | 国产伦精品一区二区三区高清 | 日韩大片在线免费观看 | 成人在线观看你懂的 | 亚洲成人黄色 | 亚洲婷婷免费 | 免费看色视频 | 很污的网站 | 欧美日韩中文字幕视频 | 五月婷婷开心 | 久久成年人网站 | 久久综合国产伦精品免费 | 深夜视频久久 | 玖玖在线资源 | 制服丝袜在线 | 国产精品成久久久久 | 高清av在线 | 福利二区视频 | 91精品毛片| 国产中文字幕在线视频 | 久久久久国 | 国产一级精品绿帽视频 | 国产精品久久久久久久久久 | 欧美日韩高清在线一区 | 一级电影免费在线观看 | 国产欧美中文字幕 | 久久视频国产精品免费视频在线 | 日韩av电影免费观看 | 干狠狠| 怡红院成人在线 | 久久国产经典视频 | 99视频在线精品免费观看2 | 91香蕉视频在线 | 亚洲欧美日韩在线一区二区 | 青青色影院 | mm1313亚洲精品国产 | 久久精品这里都是精品 |