日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

【好文收藏】k8s中Pod 无法正常解析域名:部署 DNS 调试工具排查

發布時間:2025/1/21 编程问答 42 豆豆
生活随笔 收集整理的這篇文章主要介紹了 【好文收藏】k8s中Pod 无法正常解析域名:部署 DNS 调试工具排查 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

k8s 中 Pod 無法正常解析域名:部署 DNS 調試工具排查

問題描述

最近將 Kubernetes 升級到 1.18.1 版本,不過升級完后,查看工作節點的部分 Pod 無法啟動,查看消息全是 connetion timeout 的問題,一看連接超時的地址大部分是以域名方式連接集群內部地址(ClusterIP),少部分是以域名方式連接集群外部地址,通過 IP 進行遠程連接的應用倒是沒有問題(例如,應用通過 IP 連接 MySQL),由此判斷,初步懷疑很可能是 DNS 出現了問題,后來慢慢發現 kube-proxy 中的錯誤,再定位到 IPVS parseIP Error 錯誤,再到解決問題。下面是分析及解問題的過程。

部署 DNS 調試工具

為了探針是否為 DNS 問題,這里需要提前部署用于測試 DNS 問題的 dnsutils 鏡像,該鏡像中包含了用于測試 DNS 問題的工具包,非常利于我們分析與發現問題。接下來,我們將在 Kubernetes 中部署這個工具鏡像。

創建 DNS 工具 Pod 部署文件

創建用于部署的 Deployment 資源文件 ndsutils.yaml:

ndsutils.yaml

apiVersion: v1 kind: Pod metadata: name: dnsutils spec: containers: - name: dnsutils image: mydlqclub/dnsutils:1.3 imagePullPolicy: IfNotPresent command: ["sleep","3600"]

通過 Kubectl 工具部署 NDS 工具鏡像

通過 Kubectl 工具,將對上面 DNS 工具鏡像部署到 Kubernetes 中:

-n:指定應用部署的 Namespace 空間。

$ kubectl create -f ndsutils.yaml -n kube-system

問題分析

進入 DNS 工具 Pod 的命令行

上面 DNS 工具已經部署完成,我們可也通過 Kubectl 工具進入 Pod 命令行,然后,使用里面的一些工具進行問題分析,命令如下:

  • exec:讓指定 Pod 容器執行某些命令。
  • -i:將控制臺內容傳入到容器。
  • -t:進入容器的 tty 使用 bash 命令行。
  • -n:指定上面部署 DNS Pod 所在的 Namespace。
$ kubectl exec -it dnsutils /bin/sh -n kube-system

通過 Ping 和 Nsloopup 命令測試

進入容器 sh 命令行界面后,先使用 ping 命令來分別探測觀察是否能夠 ping 通集群內部和集群外部的地址,觀察到的信息如下:

## Ping 集群外部,例如這里 ping 一下百度 $ ping www.baidu.com ping: bad address 'www.baidu.com'## Ping 集群內部 kube-apiserver 的 Service 地址 $ ping kubernetes.default ping: bad address 'kubernetes.default'## 使用 nslookup 命令查詢域名信息 $ nslookup kubernetes.default ;; connection timed out; no servers could be reached## 直接 Ping 集群內部 kube-apiserver 的 IP 地址 $ ping 10.96.0.1 PING 10.96.0.1 (10.96.0.1): 56 data bytes 64 bytes from 10.96.0.1: seq=0 ttl=64 time=0.096 ms 64 bytes from 10.96.0.1: seq=1 ttl=64 time=0.050 ms 64 bytes from 10.96.0.1: seq=2 ttl=64 time=0.068 ms## 退出 dnsutils Pod 命令行 $ exit

可以觀察到兩次 ping 域名都不能 ping 通,且使用 nsloopup 分析域名信息時超時。然而,使用 ping kube-apiserver 的 IP 地址 “10.96.0.1” 則可以正常通信,所以,排除網絡插件(Flannel、Calico 等)的問題。初步判斷,很可能是 CoreDNS 組件的錯誤引起的某些問題,所以接下來我們測試 CoreDNS 是否正常。

檢測 CoreDNS 應用是否正常運行

首先,檢查 CoreDNS Pod 是否正在運行,如果 READY 為 0,則顯示 CoreDNS 組件有問題:

  • -l:指定根據 label 標簽進行查找,篩選有該 label 的 Pod。
  • -n:指定 CoreDNS 組件部署的 Namespace。
$ kubectl get pods -l k8s-app=kube-dns -n kube-system NAME READY STATUS RESTARTS AGE coredns-669f77d7cc-8pkpw 1/1 Running 2 6h5m coredns-669f77d7cc-jk9wk 1/1 Running 2 6h5m

可也看到 CoreDNS 兩個 Pod 均正常啟動,所以再查看兩個 Pod 中的日志信息,看看有無錯誤日志:

$ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); \ do kubectl logs --namespace=kube-system $p; done.:53 [INFO] plugin/reload: Running configuration MD5 = 4e235fcc3696966e76816bcd9034ebc7 CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b .:53 [INFO] plugin/reload: Running configuration MD5 = 4e235fcc3696966e76816bcd9034ebc7 CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b

通過上面信息可以觀察到,日志中信息也是正常啟動沒有問題。再接下來,查看下 CoreDNS 的入口 Service “kube-dns” 是否存在:

kube-dns 的 IP 為 10.96.0.10,集群內的 Pod 都是通過該 IP 與 DNS 組件進行交互,查詢 DNS 信息。

$ kubectl get service -n kube-system | grep kube-dns NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) kube-dns ClusterIP 10.96.0.10 <none> 53/UDP,53/TCP,9153/TCP

上面顯示 Service “kube-dns” 也存在,但是 Service 是通過 endpoints 和 Pod 進行綁定的,所以看看這個 CoreDNS 的 Endpoints 是否存在,及信息是否正確:

$ kubectl get endpoints kube-dns -n kube-system NAME ENDPOINTS kube-dns 10.244.0.21:53,d10.244.2.82:53,10.244.0.21:9153

可以看到 Endpoints 配置也是正常的,正確的與兩個 CporeDNS Pod 進行了關聯。

經過上面一系列檢測 CoreDNS 組件確實是正常運行。接下來,觀察 CoreDNS 域名解析日志,進而確定 Pod 中的域名解析請求是否能夠正常進入 CoreDNS。

觀察 CoreDNS 域名解析日志信息

使用 kubectl edit 命令來修改存儲于 Kubernetes ConfigMap 中的 CoreDNS 配置參數信息,添加 log 參數,讓 CoreDNS 日志中顯示域名解析信息:

CoreDNS 配置參數說明:

  • errors:輸出錯誤信息到控制臺。
  • health:CoreDNS 進行監控檢測,檢測地址為 http://localhost:8080/health 如果狀態為不健康則讓 Pod 進行重啟。
  • ready:全部插件已經加載完成時,將通過 endpoints 在 8081 端口返回 HTTP 狀態 200。
  • kubernetes:CoreDNS 將根據 Kubernetes 服務和 pod 的 IP 回復 DNS 查詢。
  • prometheus:是否開啟 CoreDNS Metrics 信息接口,如果配置則開啟,接口地址為 http://localhost:9153/metrics
  • forward:任何不在Kubernetes 集群內的域名查詢將被轉發到預定義的解析器 (/etc/resolv.conf)。
  • cache:啟用緩存,30 秒 TTL。
  • loop:檢測簡單的轉發循環,如果找到循環則停止 CoreDNS 進程。
  • reload:監聽 CoreDNS 配置,如果配置發生變化則重新加載配置。
  • loadbalance:DNS 負載均衡器,默認 round_robin。
## 編輯 coredns 配置 $ kubectl edit configmap coredns -n kube-systemapiVersion: v1 data: Corefile: | .:53 {log #添加logerrorshealth {lameduck 5s}readykubernetes cluster.local in-addr.arpa ip6.arpa {pods insecurefallthrough in-addr.arpa ip6.arpattl 30}prometheus :9153forward . /etc/resolv.confcache 30loopreloadloadbalance }

保存更改后 CoreDNS 會自動重新加載配置信息,不過可能需要等上一兩分鐘才能將這些更改傳播到 CoreDNS Pod。等一段時間后,再次查看 CoreDNS 日志:

$ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); \ do kubectl logs --namespace=kube-system $p; done.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] 127.0.0.1:47278 - 55171 "HINFO IN 4940754309314083739.5160468069505858354. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.040844011s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete [INFO] 127.0.0.1:32896 - 49064 "HINFO IN 1027842207973621585.7098421666386159336. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.044098742s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete

可以看到 CoreDNS 已經重新加載了配置,我們再次進入 dnsuitls Pod 中執行 ping 命令:

## 進入 DNSutils Pod 命令行 $ kubectl exec -it dnsutils /bin/sh -n kube-system## 執行 ping 命令 $ ping www.baidu.com## 退出 dnsutils Pod 命令行 $ exit

然后,再次查看 CoreDNS 的日志信息:

$ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); \ do kubectl logs --namespace=kube-system $p; done.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] 127.0.0.1:47278 - 55171 "HINFO IN 4940754309314083739.5160468069505858354. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.040844011s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete [INFO] 127.0.0.1:32896 - 49064 "HINFO IN 1027842207973621585.7098421666386159336. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.044098742s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete

發現和之前沒有執行 ping 命令時候一樣,沒有 DNS 域名解析的日志信息,說明 Pod 執行域名解析時,請求并沒有進入 CoreDNS 中。接下來在查看 Pod 中 DNS 配置信息,進而分析問題。

查看 Pod 中的 DNS 配置信息

一般 Pod 中的 DNS 策略默認為 ClusterFirst,該參數起到的作用是,優先從 Kubernetes DNS 插件地址讀取 DNS 配置。所以,我們正常創建的 Pod 中,DNS 配置 DNS 服務器地址應該指定為 Kubernetes 集群的 DNS 插件 Service 提供的虛擬 IP 地址。

注:其中 DNS 策略(dnsPolicy)支持四種類型:

  • Default: 從 DNS 所在節點繼承 DNS 配置,即該 Pod 的 DNS 配置與宿主機完全一致。
  • ClusterFirst:預先從 Kubenetes 的 DNS 插件中進行 DNS 解析,如果解析不成功,才會使用宿主機的 DNS 進行解析。
  • ClusterFirstWithHostNet:Pod 是用 HOST 模式啟動的(hostnetwork),用 HOST 模式表示 Pod 中的所有容器,都使用宿主機的 /etc/resolv.conf 配置進行 DNS 解析,但如果使用了 HOST 模式,還繼續使用 Kubernetes 的 DNS 服務,那就將 dnsPolicy 設置為 ClusterFirstWithHostNet。
  • None:完全忽略 kubernetes 系統提供的 DNS,以 Pod Spec 中 dnsConfig 配置為主。

為了再分析原因,我們接著進入 dnsutils Pod 中,查看 Pod 中 DNS 配置文件 /etc/resolv.conf 配置參數是否正確:

resolv.conf 配置參數說明:

  • search: 指明域名查詢順序。
  • nameserver: 指定 DNS 服務器的 IP 地址,可以配置多個 nameserver。
## 進入 dnsutils Pod 內部 sh 命令行 $ kubectl exec -it dnsutils /bin/sh -n kube-system## 查看 resolv.conf 配置文件 $ cat /etc/resolv.confnameserver 10.96.0.10 search kube-system.svc.cluster.local svc.cluster.local cluster.local options ndots:5## 退出 DNSutils Pod 命令行 $ exit

可以看到 Pod 內部的 resolv.conf 內容,其中 nameserver 指定 DNS 解析服務器 IP 為 “10.96.0.10” ,這個 IP 地址正是本人 Kubernetes 集群 CoreDNS 的 Service “kube-dns” 的 cluterIP,說明當 Pod 內部進行域名解析時,確實是將查詢請求發送到 Service “kube-dns” 提供的虛擬 IP 進行域名解析。

那么,既然 Pod 中 DNS 配置文件沒問題,且 CoreDNS 也沒問題,會不會是 Pod 本身域名解析不正常呢?或者 Service “kube-dns” 是否能夠正常轉發域名解析請求到 CoreDNS Pod 中?

當然,猜想是沒有用的,進行一下測試來觀察問題到底出在哪里。

進行觀察來定位問題所在

上面懷疑是 Pod 本身解析域名有問題,不能正常解析域名。或者 Pod 沒問題,但是請求域名解析時將請求發送到 Service “kube-dns” 后不能正常轉發請求到 CoreDNS Pod。 為了驗證這兩點,我們可以修改 Pod 中的 /etc/resolv.conf 配置來進行測試驗證。

修改 resolv.conf 中 DNS 解析請求地址為 阿里云 DNS 服務器地址,然后執行 ping 命令驗證是否為 Pod 解析域名是否有問題:

## 進入 dnsutils Pod 內部 sh 命令行 $ kubectl exec -it dnsutils /bin/sh -n kube-system## 編輯 /etc/resolv.conf 文件,修改 nameserver 參數為阿里云提供的 DNS 服務器地址 $ vi /etc/resolv.confnameserver 223.5.5.5 #nameserver 10.96.0.10 search kube-system.svc.cluster.local svc.cluster.local cluster.local options ndots:5## 修改完后再進行 ping 命令測試,看看是否能夠解析 www.mydlq.club 網址 $ ping www.mydlq.clubPING www.mydlq.club (140.143.8.181) 56(84) bytes of data. 64 bytes from 140.143.8.181 (140.143.8.181): icmp_seq=1 ttl=128 time=9.70 ms 64 bytes from 140.143.8.181 (140.143.8.181): icmp_seq=2 ttl=128 time=9.21 ms## 退出 DNSutils Pod 命令行 $ exit

上面可也觀察到 Pod 中更換 DNS 服務器地址后,域名解析正常,說明 Pod 本身域名解析是沒有問題的。

接下來再修改 resolv.conf 中 DNS 解析請求地址為 CoreDNS Pod 的 IP 地址,這樣讓 Pod 直接連接 CoreDNS Pod 的 IP,而不通過 Service 進行轉發,再進行 ping 命令測試,進而判斷 Service kube-dns 是否能夠正常轉發請求到 CoreDNS Pod 的問題:

## 查看 CoreDNS Pod 的 IP 地址 $ kubectl get pods -n kube-system -o wide | grep corednscoredns-669f77d7cc-rss5f 1/1 Running 0 10.244.2.155 k8s-node-2-13 coredns-669f77d7cc-rt8l6 1/1 Running 0 10.244.1.163 k8s-node-2-12## 進入 dnsutils Pod 內部 sh 命令行 $ kubectl exec -it dnsutils /bin/sh -n kube-system## 編輯 /etc/resolv.conf 文件,修改 nameserver 參數為阿里云提供的 DNS 服務器地址 $ vi /etc/resolv.confnameserver 10.244.2.155 nameserver 10.244.1.163 #nameserver 10.96.0.10 search kube-system.svc.cluster.local svc.cluster.local cluster.local options ndots:5## 修改完后再進行 ping 命令測試,看看是否能夠解析 www.mydlq.club 網址 $ ping www.mydlq.clubPING www.baidu.com (39.156.66.18): 56 data bytes 64 bytes from 39.156.66.18: seq=0 ttl=127 time=6.054 ms 64 bytes from 39.156.66.18: seq=1 ttl=127 time=4.678 ms## 退出 DNSutils Pod 命令行 $ exit## 觀察 CoreDNS 日志信息,查看有無域名解析相關日志 $ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); \ do kubectl logs --namespace=kube-system $p; done.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] 127.0.0.1:47278 - 55171 "HINFO IN 4940754309314083739.5160468069505858354. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.040844011s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete [INFO] 10.244.1.162:40261 - 21083 "AAAA IN www.mydlq.club.kube-system.svc.cluster.local. udp 62 false 512" NXDOMAIN qr,aa,rd 155 0.000398875s [INFO] 10.244.1.162:40261 - 20812 "A IN www.mydlq.club.kube-system.svc.cluster.local. udp 62 false 512" NXDOMAIN qr,aa,rd 155 0.000505793s [INFO] 10.244.1.162:55066 - 53460 "AAAA IN www.mydlq.club.svc.cluster.local. udp 50 false 512" NXDOMAIN qr,aa,rd 143 0.000215384s [INFO] 10.244.1.162:55066 - 53239 "A IN www.mydlq.club.svc.cluster.local. udp 50 false 512" NXDOMAIN qr,aa,rd 143 0.000267642s.:53 [INFO] plugin/reload: Running configuration MD5 = 6434d0912b39645ed0707a3569fd69dc CoreDNS-1.6.7 linux/amd64, go1.13.6, da7f65b [INFO] Reloading [INFO] plugin/health: Going into lameduck mode for 5s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete [INFO] 127.0.0.1:32896 - 49064 "HINFO IN 1027842207973621585.7098421666386159336. udp 57 false 512" NXDOMAIN qr,rd,ra 57 0.044098742s [INFO] plugin/reload: Running configuration MD5 = a4809ab99f6713c362194263016e6fac [INFO] Reloading complete [INFO] 10.244.1.162:40261 - 21083 "AAAA IN www.mydlq.club.kube-system.svc.cluster.local. udp 62 false 512" NXDOMAIN qr,aa,rd 155 0.000217299s [INFO] 10.244.1.162:40261 - 20812 "A IN www.mydlq.club.kube-system.svc.cluster.local. udp 62 false 512" NXDOMAIN qr,aa,rd 155 0.000264552s [INFO] 10.244.1.162:55066 - 53460 "AAAA IN www.mydlq.club.svc.cluster.local. udp 50 false 512" NXDOMAIN qr,aa,rd 143 0.000144795s [INFO] 10.244.1.162:55066 - 53239 "A IN www.mydlq.club.svc.cluster.local. udp 50 false 512" NXDOMAIN qr,aa,rd 143 0.000221163s

經過上面兩個測試,已經可以得知,如果 Pod DNS 配置中直接修改 DNS 服務器地址為 CoreDNS Pod 的 IP 地址,DNS 解析確實沒有問題,能夠正常解析。不過,正常的情況下 Pod 中 DNS 配置的服務器地址一般是 CoreDNS 的 Service 地址,不直接綁定 Pod IP(因為 Pod 每次重啟 IP 都會發生變化)。 所以問題找到了,正是在 Pod 向 CoreDNS 的 Service “kube-dns” 進行域名解析請求轉發時,出現了問題,一般 Service 的問題都跟 Kube-proxy 組件有關,接下來觀察該組件是否存在問題。

分析 Kube-Proxy 是否存在問題

觀察 Kube-proxy 的日志,查看是否存在問題:

## 查看 kube-proxy Pod 列表 $ kubectl get pods -n kube-system | grep kube-proxykube-proxy-6kdj2 1/1 Running 3 9h kube-proxy-lw2q6 1/1 Running 3 9h kube-proxy-mftlt 1/1 Running 3 9h## 選擇一個 kube-proxy Pod,查看最后 5 條日志內容 $ kubectl logs kube-proxy-6kdj2 --tail=5 -n kube-systemE0326 15:20:23.159364 1 proxier.go:1950] Failed to list IPVS destinations, error: parseIP Error ip=[10 96 0 10 0 0 0 0 0 0 0 0 0 0 0 0] E0326 15:20:23.159388 1 proxier.go:1192] Failed to sync endpoint for service: 10.8.0.10:53/UPD, err: parseIP Error ip=[10 96 0 16 0 0 0 0 0 0 0 0 0 0 0 0] E0326 15:20:23.159479 1 proxier.go:1950] Failed to list IPVS destinations, error: parseIP Error ip=[10 96 0 10 0 0 0 0 0 0 0 0 0 0 0 0] E0326 15:20:23.159501 1 proxier.go:1192] Failed to sync endpoint for service: 10.8.0.10:53/TCP, err: parseIP Error ip=[10 96 0 16 0 0 0 0 0 0 0 0 0 0 0 0] E0326 15:20:23.159595 1 proxier.go:1950] Failed to list IPVS destinations, error: parseIP Error ip=[10 96 0 10 0 0 0 0 0 0 0 0 0 0 0 0]

通過 kube-proxy Pod 的日志可以看到,里面有很多 Error 級別的日志信息,根據關鍵字 IPVS、parseIP Error 可知,可能是由于 IPVS 模塊對 IP 進行格式化導致出現問題。

因為這個問題是升級到 Kubernetes 1.18 版本才出現的,所以去 Kubernetes GitHub 查看相關 issues,發現有人在升級 Kubernetes 版本到 1.18 后,也遇見了相同的問題,經過 issue 中 Kubernetes 維護人員討論,分析出原因可能為新版 Kubernetes 使用的 IPVS 模塊是比較新的,需要系統內核版本支持,本人使用的是 CentOS 系統,內核版本為 3.10,里面的 IPVS 模塊比較老舊,缺少新版 Kubernetes IPVS 所需的依賴。

根據該 issue 討論結果,解決該問題的辦法是,更新內核為新的版本。

注:該 issues 地址為:https://github.com/kubernetes/ … 89520

解決問題

升級系統內核版本

升級 Kubernetes 集群各個節點的 CentOS 系統內核版本:

## 載入公鑰 $ rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org## 安裝 ELRepo 最新版本 $ yum install -y https://www.elrepo.org/elrepo-release-7.el7.elrepo.noarch.rpm## 列出可以使用的 kernel 包版本 $ yum list available --disablerepo=* --enablerepo=elrepo-kernel## 安裝指定的 kernel 版本: $ yum install -y kernel-lt-4.4.218-1.el7.elrepo --enablerepo=elrepo-kernel## 查看系統可用內核 $ cat /boot/grub2/grub.cfg | grep menuentrymenuentry 'CentOS Linux (3.10.0-1062.el7.x86_64) 7 (Core)' --class centos (略) menuentry 'CentOS Linux (4.4.218-1.el7.elrepo.x86_64) 7 (Core)' --class centos ...(略)## 設置開機從新內核啟動 $ grub2-set-default "CentOS Linux (4.4.218-1.el7.elrepo.x86_64) 7 (Core)"## 查看內核啟動項 $ grub2-editenv list saved_entry=CentOS Linux (4.4.218-1.el7.elrepo.x86_64) 7 (Core)

重啟系統使內核生效:

$ reboot

啟動完成查看內核版本是否更新:

$ uname -r4.4.218-1.el7.elrepo.x86_64

測試 Pod 中 DNS 是否能夠正常解析

進入 Pod 內部使用 ping 命令測試 DNS 是否能正常解析:

## 進入 dnsutils Pod 內部 sh 命令行 $ kubectl exec -it dnsutils /bin/sh -n kube-system## Ping 集群外部,例如這里 ping 一下百度 $ ping www.baidu.com 64 bytes from 39.156.66.14 (39.156.66.14): icmp_seq=1 ttl=127 time=7.20 ms 64 bytes from 39.156.66.14 (39.156.66.14): icmp_seq=2 ttl=127 time=6.60 ms 64 bytes from 39.156.66.14 (39.156.66.14): icmp_seq=3 ttl=127 time=6.38 ms## Ping 集群內部 kube-api 的 Service 地址 $ ping kubernetes.default 64 bytes from kubernetes.default.svc.cluster.local (10.96.0.1): icmp_seq=1 ttl=64 time=0.051 ms 64 bytes from kubernetes.default.svc.cluster.local (10.96.0.1): icmp_seq=2 ttl=64 time=0.051 ms 64 bytes from kubernetes.default.svc.cluster.local (10.96.0.1): icmp_seq=3 ttl=64 time=0.064 ms

可以看到 Pod 中的域名解析已經恢復正常。

原文鏈接:http://www.mydlq.club/article/78/

總結

以上是生活随笔為你收集整理的【好文收藏】k8s中Pod 无法正常解析域名:部署 DNS 调试工具排查的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

成片视频免费观看 | 国产午夜在线观看视频 | 中文字幕在线观看完整 | 久久深夜| 97超碰在线久草超碰在线观看 | 91在线中字 | 天天操夜夜曰 | 日韩久久在线 | 国产精品h在线观看 | 美州a亚洲一视本频v色道 | 天天爽天天碰狠狠添 | 五月婷婷六月综合 | 国产黄a三级三级 | 四虎欧美 | 中国成人一区 | 国产精品久久久久影院日本 | 久久黄色影视 | 欧美日韩一区二区三区不卡 | 亚洲精品日韩av | 最近久乱中文字幕 | 国产麻豆视频在线观看 | 在线视频在线观看 | 国产精品一区二区久久 | 国产成人精品av在线 | 在线观看你懂的网站 | av午夜电影| 日韩精品免费一区二区在线观看 | 日韩二三区| 欧美天堂久久 | 狠狠干美女 | 久久草精品| 免费在线看成人av | 国产精品一区二区在线观看免费 | 国产黑丝一区二区 | 亚洲va欧美va人人爽春色影视 | 成片免费观看视频 | 国产精品久久亚洲 | 一区二区视频在线观看免费 | 国产精品视频在线看 | 日日夜夜天天操 | 日韩手机在线观看 | 在线观看国产成人av片 | 中文字幕在线看视频 | 国产一级电影免费观看 | 又色又爽又黄高潮的免费视频 | 欧美日韩国产精品一区二区三区 | 天天做日日做天天爽视频免费 | 黄色a一级视频 | 视频国产| 99国产一区二区三精品乱码 | 免费看毛片网站 | 日韩天堂网| 久精品视频在线观看 | 91 在线视频播放 | 国产福利一区二区三区视频 | 日韩在线高清免费视频 | 奇米影视8888在线观看大全免费 | 98精品国产自产在线观看 | 日本久久视频 | 久久久久欠精品国产毛片国产毛生 | 欧美片网站yy | 特级西西444www大胆高清无视频 | 人人爱人人舔 | 久久精品—区二区三区 | 国产精品6999成人免费视频 | 欧美一二区视频 | 久久激情片 | 免费看片网址 | 国产专区视频在线 | 天天操夜夜曰 | 日韩免费在线一区 | 国产日韩欧美在线免费观看 | 久久久久久久久久久久电影 | 国产午夜一区 | 欧美在线视频a | 久久精品国产99国产 | 这里有精品在线视频 | 国产精品麻豆视频 | 91精品欧美 | 久久久国产精品一区二区三区 | 亚洲黄色三级 | 91精品国产成 | 在线欧美最极品的av | 免费看污在线观看 | 91av资源在线 | 国产一级在线免费观看 | 久久专区| 91成人在线视频 | 国产视频首页 | 99久久久久久国产精品 | www.久久视频 | 日韩精品一卡 | 国产美女精品在线 | 九九在线精品视频 | 国产淫片免费看 | 亚洲精品国产精品乱码不99热 | 91成人在线视频观看 | 天堂av高清 | 国产成人精品女人久久久 | 草免费视频 | 久久久鲁 | 国产精品乱码一区二三区 | 国产原创在线观看 | 日日干精品 | 亚洲精品国产精品久久99 | 色综合久久精品 | 日韩va亚洲va欧美va久久 | 国产无遮挡又黄又爽在线观看 | 亚洲无人区小视频 | 成年人在线观看网站 | 色婷婷天天干 | 人人人爽 | 国产99久久久精品 | 亚洲精品国产精品国自产 | www.在线观看av | 欧美日韩国产精品一区 | 国产精品久久久久久久久久久免费看 | 久久久污| 国产香蕉视频在线播放 | 国产福利在线不卡 | 亚洲第一成网站 | av免费看网站 | 日韩av网站在线播放 | 国产精品福利小视频 | 亚洲一级特黄 | 中文字幕在线看视频 | 伊人日日干 | 久久久久久久久久久高潮一区二区 | 99免费看片 | 美女久久 | 国产一区二区电影在线观看 | 成人久久 | 久久在线 | 久艹视频免费观看 | 日韩精品免费在线观看视频 | 国产精品久久久久久久久搜平片 | 色av色av色av | 欧美国产精品久久久久久免费 | 麻豆视频在线播放 | 亚洲乱码精品久久久久 | 日韩欧美精品一区 | 99re国产视频 | 五月婷婷中文网 | 国产视频久久久久 | 蜜臀精品久久久久久蜜臀 | www91在线观看 | 国产精品 日韩 | 国产视频一区在线免费观看 | 在线观看91网站 | 国产一区二区三区视频在线 | 日韩91av| 91爱爱视频| 欧美视频国产视频 | 午夜电影 电影 | 99人成在线观看视频 | 中文字幕一区二区三区久久蜜桃 | 奇米影视777影音先锋 | 国产日韩精品一区二区三区在线 | 久久永久免费视频 | 999久久国精品免费观看网站 | 人人干人人超 | 日本三级久久 | 美女网站免费福利视频 | 国产玖玖在线 | 99r精品视频在线观看 | 国产91国语对白在线 | 一区精品在线 | 午夜在线免费视频 | 国产精品亚洲精品 | 国产一区欧美一区 | 日韩在线观看中文字幕 | 国产一区91| 日韩高清二区 | 中文字幕在线一区二区三区 | 色噜噜在线观看视频 | av在线播放快速免费阴 | 精品久久久免费 | 亚洲春色奇米影视 | 久久精品精品 | 成人在线电影观看 | 日韩欧美观看 | 日韩精品一区二区三区免费视频观看 | 国产一级高清 | 日本精品va在线观看 | 日韩一二三 | 亚洲播播 | 久精品在线观看 | 国产精品视频不卡 | 久久精品中文字幕一区二区三区 | a视频在线播放 | 国产玖玖精品视频 | 伊人网综合在线观看 | 久久精品综合视频 | 久久久精品一区二区三区 | 久久99操| av中文字幕在线电影 | 手机av网站 | 国内精品久久久久久久久久清纯 | 99色在线 | a黄在线观看 | 亚洲a网 | 色七七亚洲影院 | 国产不卡在线观看 | 中文字幕免费在线看 | 久精品视频 | 一区二区三区在线免费观看视频 | 在线观看免费国产小视频 | 又黄又爽又湿又无遮挡的在线视频 | 狠狠干婷婷 | 91欧美国产 | 久久综合九色综合97_ 久久久 | 深爱激情站 | 99视频一区 | 天堂在线视频中文网 | 成人av在线电影 | 国产成人精品一区二区三区福利 | 久久影院中文字幕 | 在线激情小视频 | 日韩免费一区二区在线观看 | www.com在线观看 | 狠狠干在线 | 国产精品99久久久久久武松影视 | 国产黄在线 | 日韩欧美在线视频一区二区三区 | 91精品久久久久久综合乱菊 | 91在线播放综合 | 欧美欧美 | 四虎伊人 | 国产精品久久久久久模特 | 国产精品av免费 | 五月天天av | 夜色资源站国产www在线视频 | 五月天婷婷综合 | 91麻豆国产 | 午夜在线观看影院 | 成人网中文字幕 | 伊人伊成久久人综合网小说 | 天天操天天添 | 国产区精品视频 | 奇米先锋 | 日本中文字幕视频 | 99久久精品国产亚洲 | 亚洲综合小说电影qvod | 97免费在线观看视频 | 五月婷婷激情网 | 午夜色站 | 中文字幕亚洲精品日韩 | 国产最顶级的黄色片在线免费观看 | 成人在线视频网 | 国产亚洲视频在线免费观看 | 成人动漫一区二区三区 | 亚洲日b视频 | 精品久久免费 | 久久色视频 | 免费在线观看av | 亚洲一二区精品 | a久久久久 | 精品国产精品久久一区免费式 | 天天色天天上天天操 | 国产精品久久精品 | 伊人永久 | 亚洲精品高清一区二区三区四区 | 国产又黄又猛又粗 | 久草免费手机视频 | 亚洲免费视频观看 | 天天综合网在线观看 | 天天爱天天射天天干天天 | 亚洲精品影视 | 在线天堂中文www视软件 | 日本久久成人中文字幕电影 | 手机在线黄色网址 | 免费日韩 精品中文字幕视频在线 | 成人精品亚洲 | 国产精品高清在线 | 国产拍在线 | 久久99中文字幕 | 亚洲精品三级 | 久久精品www人人爽人人 | 九九热在线观看视频 | 亚洲欧美成aⅴ人在线观看 四虎在线观看 | 91久久精品一区 | 丁香九月婷婷综合 | 久久久久亚洲精品成人网小说 | 91精品免费在线 | 91精品国产99久久久久 | 国内精品久久久久影院优 | 亚洲国产福利视频 | 欧美视频日韩视频 | 亚洲天堂自拍视频 | 欧洲色综合 | 中文字幕精品一区久久久久 | 最近中文字幕大全中文字幕免费 | 婷婷5月色 | 国产一区播放 | 免费看麻豆| 成人av视屏 | 日韩免费高清在线 | 久操视频在线观看 | 欧美另类性 | 国产成人精品不卡 | 亚洲成人精品国产 | 日韩网站一区二区 | 亚洲人成人在线 | 精品国产一二三 | 久久精品九色 | 国产精品久久久久婷婷二区次 | 探花视频免费观看 | 激情导航 | 久久精品视频网址 | 成年人在线观看 | 在线99| 97在线免费| 国产成人精品一区二区三区福利 | 四虎影视精品 | 国产亚洲在线 | 91麻豆精品国产91久久久久 | 日韩精品一区二区三区在线播放 | 天天干 天天摸 天天操 | 美女久久久久久久久久久 | www.五月天婷婷.com | 九九热在线精品视频 | 伊人色综合网 | 天天爱天天舔 | 国产在线黄色 | 日韩美视频 | 精品久久久久久亚洲综合网站 | 天堂在线一区二区 | 婷婷亚洲五月 | wwxxxx日本 | 久久久久久久久久网站 | 999在线精品 | 日韩最新在线视频 | 伊人久久影视 | 欧美激情精品久久久久久免费印度 | 天天干,天天射,天天操,天天摸 | 免费观看国产成人 | 亚洲午夜av | 国产黑丝一区二区 | 五月天六月丁香 | 日韩和的一区二在线 | 大型av综合网站 | 在线观看视频一区二区三区 | 欧美极度另类性三渗透 | 色综合久久网 | 天天干夜夜夜操天 | 精品主播网红福利资源观看 | 久久久亚洲精华液 | 亚洲国产一区二区精品专区 | 精品国产一区二区三区噜噜噜 | 在线观看免费国产小视频 | 国产精品一区二区免费 | 中文字幕日韩国产 | 亚洲成人在线免费 | 欧美一二三四在线 | 中文字幕乱码在线播放 | 国产精品一区二区免费看 | 日韩视频一区二区在线观看 | 亚洲美女在线国产 | 天天综合天天综合 | 人人爱人人舔 | 亚洲精品乱码久久久久久9色 | 欧美激情视频一二区 | 波多野结衣在线视频免费观看 | 日韩av在线一区二区 | 久久久国产精品亚洲一区 | 91麻豆精品91久久久久同性 | av网站播放 | 韩国在线视频一区 | 亚洲国内精品 | 91成人免费 | 91精品国产91久久久久久三级 | 黄色一级大片在线免费看产 | 亚洲综合色视频在线观看 | 在线 成人 | 在线观看av小说 | 九九热有精品 | 中文字幕91视频 | 国产高清视频在线播放 | 亚洲精品乱码久久久一二三 | 丝袜美腿在线视频 | a级国产乱理论片在线观看 特级毛片在线观看 | 人人爽人人澡 | 手机看片午夜 | 久久久精品国产一区二区电影四季 | wwwwww色| 亚洲一区二区三区在线看 | 色就色,综合激情 | 99国产成+人+综合+亚洲 欧美 | 久久久久久久久久久影视 | 97视频成人| 天堂av高清| 国产精品一区二区免费视频 | 国产精品成人一区二区三区吃奶 | 日韩在线观看第一页 | 999久久国产精品免费观看网站 | 黄色大全视频 | 国产夫妻av在线 | 亚洲四虎在线 | 涩涩网站在线播放 | 免费亚洲黄色 | 欧美激情综合网 | 亚洲理论在线观看 | 国产一级二级在线 | 国产精品福利在线观看 | 热久久这里只有精品 | 国产美女视频网站 | 午夜av一区二区三区 | 免费国产ww | 天天色天天操天天爽 | 欧美日韩aaaa | 青春草免费视频 | 黄色看片| 国产精品久久久久久久婷婷 | 色婷婷狠狠操 | 91精品国自产在线观看欧美 | 午夜精品99久久免费 | 蜜臀一区二区三区精品免费视频 | 精品影院| 韩国一区在线 | 国产女人免费看a级丨片 | 精品国产三级 | 久热精品国产 | 激情xxxx| 欧美日韩一区二区视频在线观看 | 婷婷干五月 | 色视频在线免费 | 97香蕉视频| 视频在线精品 | 91九色综合 | 狠狠操夜夜 | 欧美日韩在线观看一区二区三区 | 97超碰在线免费观看 | 日韩精品视频免费专区在线播放 | 在线亚洲午夜片av大片 | 青青草在久久免费久久免费 | 最近最新最好看中文视频 | www.久久久com| 亚洲 欧美 另类人妖 | 国产视频高清 | 天天射天天色天天干 | 亚洲黄色成人av | 国产成人精品亚洲日本在线观看 | 国产黄色免费在线观看 | 人人澡人摸人人添学生av | 最新免费av在线 | 日韩一级网站 | 有码中文在线 | 久久99精品一区二区三区三区 | 色婷婷激情五月 | 欧美成人手机版 | 国产精品久久久久久久久久久久午夜 | 国产高清视频免费最新在线 | 久草av在线播放 | 久久美女电影 | 九九色网 | 在线你懂| 伊人va | 色欲综合视频天天天 | 成人免费视频a | 视频在线观看国产 | 久久久久久久久久亚洲精品 | 射九九 | 精品一区二区久久久久久久网站 | 国产黄色在线观看 | 中文字幕国内精品 | 国产成人av综合色 | 日韩免费精品 | 国产精品久久视频 | 91精品91| 国产999| 日韩欧美在线视频一区二区三区 | 日韩一区二区免费播放 | 人人玩人人弄 | 96国产在线| 午夜成人免费影院 | 国产精品久久网 | 成人作爱视频 | 91视频黄色 | 激情深爱 | 高清av中文在线字幕观看1 | 99国产一区| 日韩在线网 | 日韩精品大片 | 亚洲日本中文字幕在线观看 | 国产精品久久久久久久av大片 | 国产精品美女久久久久久网站 | 日本久久免费视频 | 欧美综合在线视频 | 国产精品自在线拍国产 | 天天超碰| 国产高清在线看 | 亚洲一级二级三级 | 一区二区高清在线 | 香蕉视频免费在线播放 | 成人黄色小说在线观看 | 蜜臀av性久久久久蜜臀aⅴ涩爱 | 狠狠干成人综合网 | 中文字幕在线视频一区二区三区 | 婷婷在线资源 | 欧美资源在线观看 | 国产热re99久久6国产精品 | 国产福利午夜 | 国产精品免费在线播放 | 成人久久免费视频 | 日韩美视频 | 亚洲国产中文字幕在线观看 | 深爱婷婷久久综合 | av网站手机在线观看 | 黄在线免费看 | 欧美精品免费视频 | 久草视频免费在线观看 | 奇米影视在线99精品 | 亚洲午夜精 | 综合天堂av久久久久久久 | 久日视频 | 国产手机在线观看视频 | 天堂资源在线观看视频 | 国产日韩欧美在线 | 久草在线视频网 | 中文字幕在线观看不卡 | 成人免费在线观看av | 久久dvd| 97超视频 | 欧美精品国产综合久久 | 91麻豆文化传媒在线观看 | 特级xxxxx欧美 | 中文字幕黄色 | 91一区在线观看 | 久 久久影院 | 久操视频在线播放 | 国产精品日韩在线 | 在线免费日韩 | 激情综合色综合久久综合 | 免费三级在线 | 久久精品视频观看 | 91日韩免费 | 亚洲高清视频在线观看免费 | 香蕉久久久久久久 | 亚洲一区二区三区四区在线视频 | 麻豆一区二区三区视频 | 久久成人亚洲欧美电影 | 激情五月婷婷丁香 | 在线欧美小视频 | 天天射天天操天天干 | 91精品电影 | 日韩精品字幕 | 亚洲闷骚少妇在线观看网站 | 欧美极度另类 | 麻豆精品视频在线观看免费 | 人人插人人澡 | 久产久精国产品 | 狠狠色狠狠综合久久 | av在线中文 | 久久久免费观看视频 | 免费在线观看a v | 免费国产在线视频 | 国产一区二区在线观看视频 | 日日夜夜噜 | 在线精品在线 | 四虎影视成人精品国库在线观看 | 国产精品久久久区三区天天噜 | 亚洲精选视频在线 | 女人18片 | 日韩欧美视频免费观看 | 午夜精品区 | 久久精品网站免费观看 | 狠狠色丁香婷婷综合最新地址 | 日p视频在线观看 | 久久不色| 成人小视频在线观看免费 | 国产精品99视频 | 久久国产精品色婷婷 | 偷拍区另类综合在线 | 日韩精品高清不卡 | 午夜精品一区二区三区视频免费看 | 日韩一区二区三区观看 | a级成人毛片| 国产美女黄网站免费 | 91精品色 | 国产精品久久久久久模特 | 精品视频一区在线 | 国产精品久久久区三区天天噜 | 99免费在线播放99久久免费 | 91精品国产乱码 | av免费在线网 | 日本高清久久久 | 亚洲另类视频在线观看 | 丁香五月网久久综合 | 五月天久久久 | 在线成人av| 精品国产一区二区三区蜜臀 | 韩国在线视频一区 | 五月开心综合 | 成人av直播| 24小时日本在线www免费的 | 久久久99精品免费观看乱色 | 色偷偷88欧美精品久久久 | 日韩欧美xxxx | 日韩精品一区二区三区中文字幕 | 日本爽妇网 | 午夜av免费观看 | 国产在线观看你懂得 | 国产一级性生活视频 | 久久电影中文字幕视频 | 久久精品99国产精品酒店日本 | 久草网视频在线观看 | 99精品国产一区二区三区麻豆 | 免费在线观看视频a | 国产精品免费视频久久久 | 天天色天天操综合 | 麻豆av一区二区三区在线观看 | 免费看片网址 | 午夜av网站 | 最近最新mv字幕免费观看 | 国产精品美女久久久久久久 | 国内精品久久久精品电影院 | 黄色软件视频网站 | 中文乱码视频在线观看 | 91丨九色丨国产在线观看 | 91夫妻自拍 | 婷婷精品 | 国产精品久久9 | 色婷婷中文| 天天射天天操天天 | 国产精品黑丝在线观看 | 国产精品6999成人免费视频 | 字幕网av| 久99久精品 | 碰超在线| 久久噜噜少妇网站 | 免费在线观看一区二区三区 | 国产一区二区三区四区大秀 | 久草在线视频免费资源观看 | av色一区 | 国产第一页精品 | 2019中文字幕第一页 | 国产成人精品综合久久久 | 日韩大陆欧美高清视频区 | 亚洲精品在线视频网站 | 四虎成人免费影院 | 狠狠网站 | 涩涩网站在线观看 | 日韩高清在线一区二区 | 日韩欧美高清视频在线观看 | 亚洲精品网站 | 婷婷 中文字幕 | 亚洲精品久久久蜜桃 | 香蕉视频亚洲 | 精品久久久久久一区二区里番 | 午夜精品久久久久久久99 | 久久午夜羞羞影院 | 国产精品99久久久久久久久久久久 | 亚洲一区二区高潮无套美女 | 蜜臀久久99精品久久久久久网站 | 亚洲精品久久久久中文字幕m男 | 国产色妞影院wwwxxx | 日本乱码在线 | 久久久www成人免费毛片 | 日韩免费久久 | 久久99精品久久久久久 | 国产精品久久电影观看 | 日韩美女高潮 | 久草在线免费新视频 | 一二区av | 日韩av中文字幕在线免费观看 | 黄色小网站在线观看 | 在线视频免费观看 | 97久久精品午夜一区二区 | 在线观看免费av网 | 四虎在线视频免费观看 | av免费高清观看 | 午夜精品导航 | 日韩视频免费观看高清完整版在线 | 手机在线黄色网址 | 九九热在线免费观看 | 日韩欧美精品在线 | 免费黄色一区 | 国产精品久久久久久999 | 91精品国产91久久久久久三级 | 手机看片中文字幕 | 国产精品日韩在线播放 | 91九色视频网站 | 国产91精品一区二区绿帽 | 日精品在线观看 | 成x99人av在线www | 国产中文字幕网 | 91成人天堂久久成人 | 亚洲成av人片 | 青草视频在线免费 | 国产一区不卡在线 | 久久久久久精 | 欧美精品网站 | 日韩高清在线观看 | 美女网站视频色 | 国产精品1区| 手机在线中文字幕 | 亚洲精品成人在线 | 免费视频国产 | 精品美女久久久久 | 在线亚洲精品 | 成人毛片在线视频 | 日韩成人邪恶影片 | 狠狠综合网 | 97在线精品 | 成年人免费在线观看网站 | 九九在线免费视频 | 99久久夜色精品国产亚洲 | 欧美 日韩 性 | 69国产盗摄一区二区三区五区 | 精品久久精品久久 | 国内亚洲精品 | 激情综合婷婷 | 亚洲,国产成人av | 欧美一级性生活片 | 日本午夜在线观看 | 久久精品福利视频 | 丁香激情视频 | 国产高清成人在线 | 国产九九精品视频 | 欧美一二三视频 | 九色琪琪久久综合网天天 | 人人玩人人添人人澡97 | 精品视频成人 | 91福利试看 | 国产美腿白丝袜足在线av | 国产成人专区 | 2024av| 久久天天操| 一区二区三区久久精品 | 91av免费在线观看 | 91精品导航| 伊人网av | 国产一区二区不卡视频 | 免费观看一区二区三区视频 | 久久少妇免费视频 | 中文字幕欧美日韩va免费视频 | 婷婷亚洲综合五月天小说 | 夜夜操天天摸 | 国产亚洲精品成人av久久影院 | 欧美最猛性xxxxx亚洲精品 | 中文字幕 第二区 | av在线播放亚洲 | 亚洲 欧洲 国产 精品 | 狠狠躁夜夜躁人人爽超碰97香蕉 | 欧美一区免费观看 | 91av影视| 精品国产乱码久久久久久三级人 | 最新日韩视频在线观看 | 成人免费看片98欧美 | 成年人在线看视频 | 三级免费黄色 | 麻花豆传媒一二三产区 | 2023亚洲精品国偷拍自产在线 | 亚洲h色精品 | av黄色免费看 | 亚洲国产免费 | 日韩欧美91| 国产va精品免费观看 | 香蕉视频日本 | 天天爽天天爽 | 夜添久久精品亚洲国产精品 | 狠狠狠狠狠狠狠狠 | 国产不卡av在线播放 | 国产黄色免费观看 | 免费观看完整版无人区 | 久久一区91 | 成年人网站免费观看 | 二区三区在线 | 久草视频视频在线播放 | 精品国产_亚洲人成在线 | 精品成人免费 | 日韩欧美视频在线 | 亚洲成人精品国产 | 久久调教视频 | 天天玩天天干 | 日韩欧美精品一区二区三区经典 | 成人中文字幕在线观看 | 五月宗合网| 丁香六月婷婷综合 | 人人澡人人爱 | 91系列在线 | 日韩伦理片一区二区三区 | 国产精品免费观看在线 | 欧美一区影院 | 在线观看一区二区视频 | 亚洲一二三久久 | 婷婷网址| 日日躁天天躁 | 色视频成人在线观看免 | 99热播精品 | 欧美a级成人淫片免费看 | 夜夜摸夜夜爽 | 99精品免费久久久久久久久 | 人人舔人人干 | 97品白浆高清久久久久久 | 911在线| 国产免费午夜 | 人人澡人人爱 | 91视频久久久 | 麻豆国产精品va在线观看不卡 | 国产精品自产拍在线观看蜜 | 99情趣网视频 | www.色综合.com | 午夜精品视频一区 | 天天干 夜夜操 | 国语精品视频 | 国产亚洲精品成人av久久影院 | 在线看一区二区 | 毛片网站在线观看 | 亚洲欧美国产日韩在线观看 | 久久有精品 | 97超碰中文| 伊人天堂av | 久久久久久久久久电影 | 国产精品久久久久久久久搜平片 | 色.www| 国产在线色 | 99热这里有 | 婷婷资源站 | av免费播放| 欧美精品一二三 | 九九九热精品免费视频观看 | 51久久夜色精品国产麻豆 | www蜜桃视频 | 九九三级毛片 | 免费看日韩 | 日韩精品一区电影 | 国产破处在线视频 | 国产亚洲精品精品精品 | 懂色av一区二区三区蜜臀 | 人人爽人人射 | 国产精品va在线播放 | 成人在线观看免费视频 | 日本中文一级片 | 亚洲欧美日韩国产一区二区 | 亚洲免费在线看 | 97超碰免费在线 | 91麻豆精品国产自产 | 91在线观看黄 | 超级碰碰碰碰 | 91亚洲精品久久久蜜桃 | 日韩欧美大片免费观看 | 日韩乱码在线 | 91在线免费观看网站 | 精品国产黄色片 | 一级做a爱片性色毛片www | 色婷婷综合久久久中文字幕 | 激情五月婷婷网 | 国产中文字幕在线观看 | 久久综合久久久 | 日韩精品 在线视频 | 中文字幕在线观看一区二区 | 黄色特一级片 | 91精品啪在线观看国产线免费 | 亚洲男男gaygay无套同网址 | 国产原创在线视频 | 久9在线| 国产在线精品一区二区三区 | 91精品久久久久久久久久久久久 | 天天干天天怕 | 中文字幕av一区二区三区四区 | 在线99视频| 日本黄色大片儿 | 日本中文字幕一二区观 | 丁香五香天综合情 | 婷婷丁香社区 | 色在线中文字幕 | 日韩中文字幕亚洲一区二区va在线 | 日韩精品一区二区久久 | 国精产品999国精产品岳 | 欧日韩在线视频 | 日日夜精品| 亚洲jizzjizz日本少妇 | 国内精品久久久久影院日本资源 | 国产精品久久久久久久久久久久冷 | 国产免费观看高清完整版 | 一级黄色大片在线观看 | 免费成人av网站 | 麻花豆传媒mv在线观看 | 国产在线欧美在线 | 韩国av一区 | 成人在线播放av | 午夜体验区 | 国产精品一区免费观看 | 天天拍天天草 | 国产精品h在线观看 | 国产午夜精品一区二区三区在线观看 | 97在线免费观看视频 | 日日弄天天弄美女bbbb | av电影在线观看 | 中文一区二区三区在线观看 | 麻豆国产视频 | 久久精品这里都是精品 | 黄污在线看 | 国产亚洲精品久久网站 | 午夜视频一区二区 | 欧美不卡在线 | 夜夜操狠狠干 | 日韩一区在线免费观看 | 天天草天天| 亚洲综合爱 | 久久艹精品 | 人人爽人人香蕉 | 亚洲永久精品国产 | 久久曰视频 | 天天插伊人 | av最新资源 | 色先锋av资源中文字幕 | 九九久久久久久久久激情 | 激情久久五月天 | 五月天激情视频在线观看 | 亚洲国产久| 国产人在线成免费视频 | 亚洲视频一区二区三区在线观看 | 免费在线国产黄色 | 亚洲经典在线 | 808电影免费观看三年 | 国产精成人品免费观看 | 麻豆国产精品永久免费视频 | 97超碰在线免费观看 | 国产日韩精品一区二区在线观看播放 | 国产亚洲精品久久久久久久久久久久 | 国产精品大片免费观看 | 亚洲精品日韩一区二区电影 | a特级毛片 | 免费观看一区二区三区视频 | 免费人人干 | 深爱激情五月综合 | 久久99久久99精品 | 久久久久一区二区三区 | 综合精品在线 | 久草网视频 | 国产午夜影院 | 欧美在线1区 | 中文字幕亚洲字幕 | 日韩视频在线不卡 | 欧美黄色特级片 | 色综合天天色 | 免费观看性生交大片3 | 九九热精品在线 | 欧美在线观看视频一区二区三区 | 五月婷婷黄色网 | 精品久久久久久久久久久久 | 一级大片在线观看 | 色悠悠久久综合 | 国产精品毛片一区视频 | 天堂在线视频中文网 | 九七视频在线观看 | 美女视频黄色免费 | 最新国产在线视频 | 香蕉视频在线网站 | 久影院| 久久99精品久久久久久 | 新版资源中文在线观看 | 亚洲精品短视频 | 视频在线观看入口黄最新永久免费国产 | 天天插日日射 | 精品无人国产偷自产在线 | 亚洲精品久久久久久久蜜桃 | 波多野结衣在线播放视频 | 国产精品你懂的在线观看 | 日韩精品视频在线观看网址 | 亚洲免费在线观看视频 | 91在线免费观看国产 | 免费能看的黄色片 | 91丨九色丨国产丨porny精品 | 午夜视频二区 | 六月久久婷婷 | 亚洲国产欧美在线看片xxoo | 免费看国产精品 | 欧美一区二区三区不卡 | 91精品成人久久 | 日韩av女优视频 | 日韩高清一区二区 | 国产精品av免费在线观看 | 人人澡人人草 | 99视频这里有精品 | 日韩色av色资源 | 久久天堂精品视频 | 超级碰碰碰碰 | 日本黄色大片免费看 | 9热精品 | 欧美日韩三级 | 在线观看视频亚洲 | 久久久精品国产一区二区 | 亚洲一区二区精品视频 | 国产中文字幕视频在线观看 | 久久久精品久久 | 一级黄色片毛片 | 欧美一级电影在线观看 | 密桃av在线 | 精品久久网站 | 97超碰国产精品女人人人爽 | 91精品婷婷国产综合久久蝌蚪 | 久久国产剧场电影 | 九九免费观看全部免费视频 | 探花视频在线观看免费版 | 91av看片 |