日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Kubesphere 多集群管理 启用多集群

發布時間:2024/8/1 编程问答 74 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Kubesphere 多集群管理 启用多集群 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

如果 Host 集群(簡稱 H 集群)的任何節點都能訪問 Member 集群(簡稱 M 集群)的 kube-apiserver 地址,您可以采用直接連接。

當 M 集群的 kube-apiserver 地址可以暴露給外網,或者 H 集群和 M 集群在同一私有網絡或子網中時,此方法均適用。

要通過直接連接使用多集群功能,您必須擁有至少兩個集群,分別用作 H 集群和 M 集群。您可以在安裝 KubeSphere 之前或者之后將一個集群指定為 H 集群或 M 集群。

準備 Host 集群


Host 集群為您提供中央控制平面,并且您只能指定一個 Host 集群。

?如果已經安裝了獨立的 KubeSphere 集群,您可以編輯集群配置,將?clusterRole?的值設置為?host。

  • 選項 A - 使用 Web 控制臺:

    使用?admin?帳戶登錄控制臺,然后進入集群管理頁面上的自定義資源 CRD,輸入關鍵字?ClusterConfiguration,然后轉到其詳情頁面。編輯?ks-installer?的 YAML 文件

  • 選項 B - 使用 Kubectl:
[root@master01 ~]# kubectl edit cc ks-installer -n kubesphere-system

[root@master01 ~]# kubectl get pod -n kubesphere-system NAME READY STATUS RESTARTS AGE ks-installer-b4cb495c9-9xjrl 1/1 Running 0 3d20h[root@master01 ~]# kubectl delete pod ks-installer-b4cb495c9-9xjrl -n kubesphere-system pod "ks-installer-b4cb495c9-9xjrl" deleted[root@master01 ~]# kubectl get pod -n kubesphere-system NAME READY STATUS RESTARTS AGE ks-installer-b4cb495c9-txs87 1/1 Running 0 14s[root@master01 ~]# kubectl logs ks-installer-b4cb495c9-txs87 -n kubesphere-system -f

您可以使用?kubectl?來獲取安裝日志以驗證狀態。運行以下命令,稍等片刻,如果 Host 集群已準備就緒,您將看到成功的日志返回。

kubectl logs -n kubesphere-system $(kubectl get pod -n kubesphere-system -l app=ks-install -o jsonpath='{.items[0].metadata.name}') -f

準備 Member 集群


為了通過?Host 集群管理 Member 集群,您需要使它們之間的?jwtSecret?相同。因此,您首先需要在?Host 集群中執行以下命令來獲取它。命令輸出結果可能如下所示:

[root@master01 ~]# kubectl -n kubesphere-system get cm kubesphere-config -o yaml | grep -v "apiVersion" | grep jwtSecretjwtSecret: "Qg6Ma8e1DwPRZ0lhtwMOGXbJNITNtxQF"

如果已經安裝了獨立的 KubeSphere 集群,您可以編輯集群配置,將?clusterRole?的值設置為?member。

  • 選項 A - 使用 Web 控制臺:

使用?admin?帳戶登錄控制臺,然后進入集群管理頁面上的自定義資源 CRD,輸入關鍵字?ClusterConfiguration,然后轉到其詳情頁面。編輯?ks-installer?的 YAML 文件

  • 選項 B - 使用 Kubectl:?
[root@master ~]# kubectl edit cc ks-installer -n kubesphere-system

在?ks-installer?的 YAML 文件中對應輸入上面所示的?jwtSecret:?

?clusterRole?的值設置為?member,然后點擊更新(如果使用 Web 控制臺)使其生效:

?可以使用?kubectl?來獲取安裝日志以驗證狀態。運行以下命令,稍等片刻,如果 Member 集群已準備就緒,您將看到成功的日志返回。(確保下面的pod是正常運行的)

[root@master01 ~]# kubectl get pod -n kube-federation-system NAME READY STATUS RESTARTS AGE kubefed-admission-webhook-644cfd765-58xgh 1/1 Running 0 3d20h kubefed-controller-manager-6bd57d69bd-5vf5f 1/1 Running 0 3d20h kubefed-controller-manager-6bd57d69bd-jkhsb 1/1 Running 0 3d20h

導入 Member 集群


1. 以?admin?身份登錄 KubeSphere 控制臺,轉到集群管理頁面點擊添加集群

2. 在導入集群頁面,輸入要導入的集群的基本信息。您也可以點擊右上角的編輯模式以 YAML 格式查看并編輯基本信息。編輯完成后,點擊下一步。?(取名只能為member要不然會失敗)

??3. 在連接方式,選擇直接連接 Kubernetes 集群,復制 Member 集群的 KubeConfig 內容并粘貼至文本框。您也可以點擊右上角的編輯模式以 YAML 格式編輯 Member 集群的 KubeConfig。

[root@master ~]# cd .kube/[root@master .kube]# ls cache config http-cache[root@master .kube]# cat config apiVersion: v1 clusters: - cluster:certificate-authority-data: LS0tLS1CRUdJTiBDRVJUSUZJQ0FURS0tLS0tCk1JSUN5RENDQWJDZ0F3SUJBZ0lCQURBTkJna3Foa2lHOXcwQkFRc0ZBREFWTVJNd0VRWURWUVFERXdwcmRXSmwKY201bGRHVnpNQjRYRFRJeE1EVXlNREEzTURNek9Gb1hEVE14TURVeE9EQTNNRE16T0Zvd0ZURVRNQkVHQTFVRQpBeE1LYTNWaVpYSnVaWFJsY3pDQ0FTSXdEUVlKS29aSWh2Y05BUUVCQlFBRGdnRVBBRENDQVFvQ2dnRUJBTFc0CnpudFcwTHVTQ2pJaktHTmFteXBQRmlZdm5zZWNPSHdwZExnNUxXVlhYRlI3eUN5VFU5M1ZJaVhGL3RjYjJmN2gKN2xncm5wc1dRSXBDOWRQcGVIKzViQmV3ektiREI2a2ZmM2dnbXBBSzFLU2NYU01RZFNneW42UTB6ZCs1SGk4cQo0cTJkRXBwZjR2cjN3RmN2QURiY1VJZmZWK0hteXRGMUE2Q2NVNnJsMlJpMW5SUkN6MUdQVjZlck9pTEozbDloCmZFbktBMkFuRzRzYkZhZGhqTVluR3J1RWRCbE5sMjN6RGdmSTdrWkZ2QnNrcGRMdW9TM0hHaFpRSTlkNFVEZ2IKaWFxMFhUTU5Ma1EvSDdORFo1NmdUWHNPd25OYlBOL295ekd4OElLU3AzbjNiVzBUcFhjSzArMGhVWHlFQmlMMwpOUVBCUVRhUzVhQlZSTVM5cnYwQ0F3RUFBYU1qTUNFd0RnWURWUjBQQVFIL0JBUURBZ0trTUE4R0ExVWRFd0VCCi93UUZNQU1CQWY4d0RRWUpLb1pJaHZjTkFRRUxCUUFEZ2dFQkFJYTd2VDZJU1o5QlNSV2xaa21pL3B0d0tNK1AKODVueGhhVEtNenRzK05OV2NoMWV4b1J0WitwUmYrV0p0QXp0OFd1TkI1VlVCOTIzWHRiV3pqTTllbXBrY1Z4VApWMGJvL0loRmNSQ2tGZCtZMmpFVnMzKzBuTE9neXpPZzhSZVFrMWNxWU85eTBZUTJrWURqdVZBSTdxc0gzQ1Y3CjFFRVhRTzR1SmtBYjNIdWZLOVYxRVBOTks5T2pxNUcreWMrbk1ZWXB4cGVSdDJEY0tyNWRxYnFlaXN6RE0zRDkKcHVZMUR4R2YyR3VyOUFGcjJnL0JyTjNUM3BuZ2pHUFdzYlovMmRUYTBqdWlHemkwUnlGQk1yMlE1dXVYc3YrNAovLzl0UkhpclorMW9NUVRXNnhyZ0lsVlpTbWg0UFQ0TFFINmtYOE9BeXdwQjBLMlo0a0c5bkhrcHVCaz0KLS0tLS1FTkQgQ0VSVElGSUNBVEUtLS0tLQo=server: https://lb.kubesphere.local:6443name: cluster.local contexts: - context:cluster: cluster.localuser: kubernetes-adminname: kubernetes-admin@cluster.local current-context: kubernetes-admin@cluster.local kind: Config preferences: {} users: - name: kubernetes-adminuser:client-certificate-data: LS0tLS1CRUdJTiBDRVJUSUZJQ0FURS0tLS0tCk1JSUM4akNDQWRxZ0F3SUJBZ0lJTHQrck01QTFxemt3RFFZSktvWklodmNOQVFFTEJRQXdGVEVUTUJFR0ExVUUKQXhNS2EzVmlaWEp1WlhSbGN6QWVGdzB5TVRBMU1qQXdOekF6TXpoYUZ3MHlNakExTWpBd056QXpOREJhTURReApGekFWQmdOVkJBb1REbk41YzNSbGJUcHRZWE4wWlhKek1Sa3dGd1lEVlFRREV4QnJkV0psY201bGRHVnpMV0ZrCmJXbHVNSUlCSWpBTkJna3Foa2lHOXcwQkFRRUZBQU9DQVE4QU1JSUJDZ0tDQVFFQXhrQ2pEeWZ1eVN1akpFeG4KR0tTTEk2Rm5nT2hxSDNIbGZyTy82bG9MZ2picGlsdEJMNGhKcjFYaXRhVDJ4d2VRM3I1bFhSaWN0UGsyamdFWgpvbDVxeXFjaVorRUgycjRSRFhOL3hKWTFNREllRithU1l5L2p0L3hiMEZSSGpTNTZtNXI4eTNacEZVdDJnOVFvCk1hekR6WjRjbzJheVAwNUlHQlluZFlFL1ZXV205eVlRYmpmTGptV2xIaXQzdGpYd0pXNWtkdTM3MWxYQnh5eDEKT1JMa0RDVlk1bUZ6SUNMRUZ6U2N0YXRPcFM3NU02Yy9CWnFyTkI1eXhUTDZ2NGhqSnd1UFNwSm9sMWIvQk5XYwpxZnYwVit3R0IyS2ZIUG5KZk1HRFhVOXNyOEJibFVIL0R5VTE1R2tLVkxGWUhPN0hlYlY3VTQ0ek9YN29qOUZCCnJKQWxkd0lEQVFBQm95Y3dKVEFPQmdOVkhROEJBZjhFQkFNQ0JhQXdFd1lEVlIwbEJBd3dDZ1lJS3dZQkJRVUgKQXdJd0RRWUpLb1pJaHZjTkFRRUxCUUFEZ2dFQkFMTHk5NTFIMU9GNFRjSTFqNjBNd3B3N3QxMTFRVXFPejdFWQorVTdvMTNEdnJPRGlwS3h3S1UwYys4cFAzRlQwZmFlSTdJZTlYcEFodHE5SUVDVkQrZGtYM3JnU2dMcmhvZ1hMCjdQempjRys5MXlSL3h6NkRFTC9Hdno1cC9DazFnMFY5cEVZOW9QNFNsRnlPSnFQVHBpRTRQd2pXMWVGY3JqejcKd0ZZVHBvZnp6R016VkFFNmJtRnJpTSs1Q3FqYlc5TnRNTGl0SWlQaGhsR2NKWFRDNjJUTE9KVXY1SEQ4ZUdIZgpId0RxU1NybGloOXdidnltU25Lb041VlQ4aVoxUm9pTUpqTUdoQkNyRWNmQkRnMFVoa1JFTU5nOExSaEhaanpvCnR5UFl2aVZoREJTcUlmODJGOCtVMnhpWU4xT2NmcFZ0R1M2ZlUzMC9nVS9tNjFzVUpYbz0KLS0tLS1FTkQgQ0VSVElGSUNBVEUtLS0tLQo=client-key-data: LS0tLS1CRUdJTiBSU0EgUFJJVkFURSBLRVktLS0tLQpNSUlFcEFJQkFBS0NBUUVBeGtDakR5ZnV5U3VqSkV4bkdLU0xJNkZuZ09ocUgzSGxmck8vNmxvTGdqYnBpbHRCCkw0aEpyMVhpdGFUMnh3ZVEzcjVsWFJpY3RQazJqZ0Vab2w1cXlxY2laK0VIMnI0UkRYTi94SlkxTURJZUYrYVMKWXkvanQveGIwRlJIalM1Nm01cjh5M1pwRlV0Mmc5UW9NYXpEelo0Y28yYXlQMDVJR0JZbmRZRS9WV1dtOXlZUQpiamZMam1XbEhpdDN0alh3Slc1a2R1MzcxbFhCeHl4MU9STGtEQ1ZZNW1GeklDTEVGelNjdGF0T3BTNzVNNmMvCkJacXJOQjV5eFRMNnY0aGpKd3VQU3BKb2wxYi9CTldjcWZ2MFYrd0dCMktmSFBuSmZNR0RYVTlzcjhCYmxVSC8KRHlVMTVHa0tWTEZZSE83SGViVjdVNDR6T1g3b2o5RkJySkFsZHdJREFRQUJBb0lCQUY4ckFCdHlhK29lREg2TQpQcUZSdTRrckhlaC9xUkhYTnZlUGlmMFJwSnlwaDRwbksrK0pXUFhXSUxKWnNpendzTlo4UjJSZFFEeVB0V1NOCm1xU2E5bUM1d29aak84WUJuMlg1bjhmYTQwVnppWWFucEhZQXN5dks5TGdZL1JBRTA4NkdvL3QzcUJJVTI1dUUKNkphUC9KNWozQk9FWk9TR3k0emtkYVN1bXB4L0NlNzVwdXNxKzhlNVVxWE5zUzdXK01XRUlPdSttZlZrVGZQMgpWeFBNOFZFZW9URjJrQmRwUmV4YnJDUkZRQktmY3NKbGhXd1ZxUWFJc0x3Tlh6dEJsbUtHcFlRc1N6cnNaekozCjhPTVRXcWtpY1FZMkorS1BBVDNUZkhseW5mK2duQktxdlpHUGN5WUFUa2tRcWE0Q2lsd2VId1I5T0dWWGM1SXMKYTk5eXVjRUNnWUVBL0Qxb1ZaTWU2VjNhM093TEd0OUd5KzQrWHlOWU04Z1dwbE1zZDJBMHFyYnp5endRRnF4WAptMjQrdFVPcGdOSVJUcWFPaFgrdCtPQUt1elh4L0FNWVJLMGZvQlZrZGNjamVmdXdVSXY3enRYZTZramtwbUtYCnZkU2YvaWUweWVtdzZFcGhOL1J5THR6RFVJcjJlM3d0UHp0T0kyZmZsRnZEbUdaVmdsZ214UWtDZ1lFQXlUVTAKTVo4WDZtY05uRnZxdXM0VVdUT3FPVFlJdzZFR2VoSlppdDJldm1qemo0MXFnbExYdGtUQ3pETzZuYTl5SHMxWQp0OUZJbTFDRDQwUm43Z2gvdXJZNkhnNUV0STJMRjYzcXgydjhsYUxpYXpFS0pPeVZQMFhzZ3V4Z0pqak96MWtECm1vSmtuRW44dWtQZEJDZFFHRkZYN0JCTVVJZ2czQU5WOE9kQXRuOENnWUEwVFROV0V5Umt0UzVOZ3JBbXlVY3YKdjkyMDhtbzJpbldQMVUweUQ0TzhKaVZVN2NaVVBUWUpKNG5mSWdHQ2tZdy9KN0FEcEY3WmJQTXNzRm5WckhxYQp1dDhFM1lxd0ZUT1k5b1F2bjJiK0UwQ2VpYkRIZzBmOWQ1b1pJL2lMcVdZaU5GSUdQU3h6NVJpbW1iblVEd0orCnl2Zy94U2tKNVNFZ2Q0K2hjRS9ScVFLQmdRQzVUR0VqN2JNMXNQQk05aTJIR2ZDTmNkSXJYQUxZUHZ4YkFYa3IKTlF4VHFRM2RQMHcrZHhLbmprMmpoMlF1Z2Z2a09CS2pQbjdTWW1VRHNPVFJ4MHZ5WkkzRFRqcWgyTlNtMndragozT1JCM2o4TW5wNE1BVUUxZ3l6Y0tkb21lUnlrd2dKYWtna2NFZHRJb3VUeFJVOHpCZjZsclNESzdZTHRlN2p5CjRkV3Ird0tCZ1FEQlZXRHpmNXRhYVJ3VWkwVXBkaUEzMStEcWROLzZYSmoxZ1gvcFk4THdPekR1T28yYUc2encKeWxjK0JYMFlwVHY2V1dvR2NCOWRqNkM5NC9BLzdDanF1S00yR3ZnQnBPS0JzRm4veTNNeHJvcEVVZ09seFV2cgoyMm53L3BNWVlLS0wwbnQxWHdDVUlZVHNKMUNROU4yL0pOVThYZFVjY2Z6Z2ViNHhKUUE0THc9PQotLS0tLUVORCBSU0EgUFJJVkFURSBLRVktLS0tLQo= [root@master .kube]# kubectl get ep NAME ENDPOINTS AGE fuseim.pri-ifs <none> 84d kubernetes 192.168.0.2:6443 84d

請確保 Host 集群的任何節點都能訪問 KubeConfig 中的?server?地址。

我這里只有一個master,如果是多master架構需要提供VIP+端口號

4. 點擊創建,然后等待集群初始化完成。

導入過程當中遇到的坑


當準備HOST集群管理時候的報錯,由于沒有鏡像包,所以需要手動retag一下本地鏡像再推送到鏡像倉庫

[root@master01 ~]# kubectl get pod -n kube-federation-system NAME READY STATUS RESTARTS AGE kubefed-43ozaylubp-7qr6w 0/1 ImagePullBackOff 0 37m kubefed-admission-webhook-644cfd765-sfctd 1/1 Running 0 131m kubefed-controller-manager-6d7b985fc5-4tg84 1/1 Running 0 131m kubefed-controller-manager-6d7b985fc5-8zmz7 1/1 Running 0 131m[root@master01 ~]# kubectl describe pod kubefed-43ozaylubp-7qr6w -n kube-federation-systemEvents:Type Reason Age From Message---- ------ ---- ---- -------Normal Scheduled 38m default-scheduler Successfully assigned kube-federation-system/kubefed-43ozaylubp-7qr6w to node01Normal SandboxChanged 38m (x5 over 38m) kubelet Pod sandbox changed, it will be killed and re-created.Warning Failed 37m (x2 over 38m) kubelet Error: ErrImagePullNormal Pulling 37m (x3 over 38m) kubelet Pulling image "192.168.0.14/kubesphere/kubectl:v1.19.0"Warning Failed 37m (x3 over 38m) kubelet Failed to pull image "192.168.0.14/kubesphere/kubectl:v1.19.0": rpc error: code = Unknown desc = Error response from daemon: unknown: artifact kubesphere/kubectl:v1.19.0 not foundNormal BackOff 13m (x114 over 38m) kubelet Back-off pulling image "192.168.0.14/kubesphere/kubectl:v1.19.0"Warning Failed 2m58s (x158 over 38m) kubelet Error: ImagePullBackOff[root@master01 harbor]# helm list -A NAME NAMESPACE REVISION UPDATED STATUS CHART APP VERSION elasticsearch-logging kubesphere-logging-system 2 2021-08-09 13:38:15.692089828 +0800 CST deployed elasticsearch-1.22.1 6.7.0-0217 elasticsearch-logging-curator kubesphere-logging-system 2 2021-08-09 13:38:18.257137124 +0800 CST deployed elasticsearch-curator-1.3.3 5.5.4-0217 jaeger-operator istio-system 1 2021-08-09 11:54:03.472568106 +0800 CST deployed jaeger-operator-2.14.2 1.17.1 kiali-operator istio-system 1 2021-08-09 11:54:11.059469125 +0800 CST deployed kiali-operator-1.26.1 v1.26.1 ks-events kubesphere-logging-system 1 2021-08-09 11:53:19.699173144 +0800 CST deployed kube-events-0.1.0 0.1.0 ks-redis kubesphere-system 1 2021-08-09 11:51:55.390736324 +0800 CST deployed redis-ha-3.9.0 5.0.5 kube-auditing kubesphere-logging-system 1 2021-08-09 11:53:12.90895128 +0800 CST deployed kube-auditing-0.1.0 0.1.0 kubefed kube-federation-system 3 2021-08-09 13:03:01.853347919 +0800 CST failed kubefed-0.7.0 logsidecar-injector kubesphere-logging-system 2 2021-08-09 13:39:36.64932203 +0800 CST deployed logsidecar-injector-0.1.0 0.1.0 nfs-client kube-system 1 2021-08-09 11:49:30.572533217 +0800 CST deployed nfs-client-provisioner-1.2.83.1.0 notification-manager kubesphere-monitoring-system 1 2021-08-09 11:54:51.831945 +0800 CST deployed notification-manager-1.0.0 1.0.0 snapshot-controller kube-system 3 2021-08-09 13:37:59.167516617 +0800 CST deployed snapshot-controller-0.1.0 2.1.1

?

手動retag在推送到鏡像倉庫?

[root@master01 harbor]# docker tag 192.168.0.14/kubesphere/kubectl:v1.19.1 192.168.0.14/kubesphere/kubectl:v1.19.0 You have mail in /var/spool/mail/root[root@master01 harbor]# docker push 192.168.0.14/kubesphere/kubectl:v1.19.0 The push refers to repository [192.168.0.14/kubesphere/kubectl] 82c95447c0ab: Layer already exists a37b661028f1: Layer already exists 9fb3aa2f8b80: Layer already exists v1.19.0: digest: sha256:ad61643208ccdc01fcd6662557bfdc7e52fd64b6e178e42122bb71e0dcd86c74 size: 947 [root@master01 harbor]# helm delete kubefed -n kube-federation-system release "kubefed" uninstalled[root@master01 harbor]# kubectl delete pod ks-installer-b4cb495c9-462bg -n kubesphere-system pod "ks-installer-b4cb495c9-462bg" deleted

[root@master01 ~]# kubectl get pod -n kube-federation-system NAME READY STATUS RESTARTS AGE kubefed-admission-webhook-644cfd765-58xgh 1/1 Running 0 45s kubefed-controller-manager-6bd57d69bd-5vf5f 1/1 Running 0 33s kubefed-controller-manager-6bd57d69bd-jkhsb 1/1 Running 0 36s[root@master01 ~]# helm list -A NAME NAMESPACE REVISION UPDATED STATUS CHART APP VERSION elasticsearch-logging kubesphere-logging-system 2 2021-08-09 15:22:59.403901408 +0800 CST deployed elasticsearch-1.22.1 6.7.0-0217 elasticsearch-logging-curator kubesphere-logging-system 2 2021-08-09 15:23:02.050024989 +0800 CST deployed elasticsearch-curator-1.3.3 5.5.4-0217 jaeger-operator istio-system 1 2021-08-09 15:16:26.665627337 +0800 CST deployed jaeger-operator-2.14.2 1.17.1 kiali-operator istio-system 1 2021-08-09 15:16:32.673002758 +0800 CST deployed kiali-operator-1.26.1 v1.26.1 ks-events kubesphere-logging-system 1 2021-08-09 15:15:49.002730971 +0800 CST deployed kube-events-0.1.0 0.1.0 ks-redis kubesphere-system 1 2021-08-09 15:14:19.603968061 +0800 CST deployed redis-ha-3.9.0 5.0.5 kube-auditing kubesphere-logging-system 1 2021-08-09 15:15:38.47307322 +0800 CST deployed kube-auditing-0.1.0 0.1.0 kubefed kube-federation-system 1 2021-08-09 15:24:45.875771492 +0800 CST deployed kubefed-0.7.0 logsidecar-injector kubesphere-logging-system 2 2021-08-09 15:24:19.47043215 +0800 CST deployed logsidecar-injector-0.1.0 0.1.0 nfs-client kube-system 1 2021-08-09 15:11:51.352679311 +0800 CST deployed nfs-client-provisioner-1.2.83.1.0 notification-manager kubesphere-monitoring-system 1 2021-08-09 15:17:18.043158159 +0800 CST deployed notification-manager-1.0.0 1.0.0 snapshot-controller kube-system 2 2021-08-09 15:22:43.356556846 +0800 CST deployed snapshot-controller-0.1.0 2.1.1

?在member加入Host集群報錯

關于jwt的報錯,需要查看兩個集群的confIgmap當中的jwt是否配置是一樣的?

[root@master01 ~]# kubectl describe configmap kubesphere-config -n kubesphere-system | grep jwtjwtSecret: "Qg6Ma8e1DwPRZ0lhtwMOGXbJNITNtxQF"[root@master .kube]# kubectl describe configmap kubesphere-config -n kubesphere-system | grep jwtjwtSecret: "wV3mj25yM7O4A4C30rb2lcbpQiikfAst"[root@master01 ~]# kubectl get configmap -n kubesphere-system NAME DATA AGE istio-ca-root-cert 1 7d20h ks-console-config 1 7d20h ks-controller-manager-leader-election 0 7d19h ks-router-config 2 7d19h kube-root-ca.crt 1 7d20h kubesphere-config 1 7d19h redis-ha-configmap 5 7d20h sample-bookinfo 1 7d20h[root@master01 ~]# kubectl describe configmap kubesphere-config -n kubesphere-system Name: kubesphere-config Namespace: kubesphere-system Labels: <none> Annotations: <none>Data ==== kubesphere.yaml: ---- authentication:authenticateRateLimiterMaxTries: 10authenticateRateLimiterDuration: 10m0sloginHistoryRetentionPeriod: 168hmaximumClockSkew: 10smultipleLogin: TruekubectlImage: 192.168.0.14/kubesphere/kubectl:v1.20.0jwtSecret: "Qg6Ma8e1DwPRZ0lhtwMOGXbJNITNtxQF"redis:host: redis.kubesphere-system.svcport: 6379password: ""db: 0network:enableNetworkPolicy: trueippoolType: calicoweaveScopeHost: weave-scope-app.weave servicemesh:istioPilotHost: http://istiod.istio-system.svc:8080/versionjaegerQueryHost: http://jaeger-query.istio-system.svc:16686servicemeshPrometheusHost: http://prometheus-k8s.kubesphere-monitoring-system.svc:9090kialiQueryHost: http://kiali.istio-system:20001 multicluster:enable: trueagentImage: 192.168.0.14/kubesphere/tower:v0.2.0proxyPublishService: tower.kubesphere-system.svc monitoring:endpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090 logging:host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-log events:host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-events auditing:enable: truehost: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-auditingalerting:prometheusEndpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090thanosRulerEndpoint: http://thanos-ruler-operated.kubesphere-monitoring-system.svc:10902thanosRuleResourceLabels: thanosruler=thanos-ruler,role=thanos-alerting-rulesEvents: <none> You have mail in /var/spool/mail/root[root@master01 ~]# kubectl get configmap kubesphere-config -n kubesphere-system -o yaml apiVersion: v1 data:kubesphere.yaml: |authentication:authenticateRateLimiterMaxTries: 10authenticateRateLimiterDuration: 10m0sloginHistoryRetentionPeriod: 168hmaximumClockSkew: 10smultipleLogin: TruekubectlImage: 192.168.0.14/kubesphere/kubectl:v1.20.0jwtSecret: "Qg6Ma8e1DwPRZ0lhtwMOGXbJNITNtxQF"redis:host: redis.kubesphere-system.svcport: 6379password: ""db: 0network:enableNetworkPolicy: trueippoolType: calicoweaveScopeHost: weave-scope-app.weaveservicemesh:istioPilotHost: http://istiod.istio-system.svc:8080/versionjaegerQueryHost: http://jaeger-query.istio-system.svc:16686servicemeshPrometheusHost: http://prometheus-k8s.kubesphere-monitoring-system.svc:9090kialiQueryHost: http://kiali.istio-system:20001multicluster:enable: trueagentImage: 192.168.0.14/kubesphere/tower:v0.2.0proxyPublishService: tower.kubesphere-system.svcmonitoring:endpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090logging:host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-logevents:host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-eventsauditing:enable: truehost: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200indexPrefix: ks-logstash-auditingalerting:prometheusEndpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090thanosRulerEndpoint: http://thanos-ruler-operated.kubesphere-monitoring-system.svc:10902thanosRuleResourceLabels: thanosruler=thanos-ruler,role=thanos-alerting-rules kind: ConfigMap metadata:annotations:kubectl.kubernetes.io/last-applied-configuration: |{"apiVersion":"v1","data":{"kubesphere.yaml":"authentication:\n authenticateRateLimiterMaxTries: 10\n authenticateRateLimiterDuration: 10m0s\n loginHistoryRetentionPeriod: 168h\n maximumClockSkew: 10s\n multipleLogin: True\n kubectlImage: 192.168.0.14/kubesphere/kubectl:v1.20.0\n jwtSecret: \"Qg6Ma8e1DwPRZ0lhtwMOGXbJNITNtxQF\"\n\n\nredis:\n host: redis.kubesphere-system.svc\n port: 6379\n password: \"\"\n db: 0\n\n\n\nnetwork:\n enableNetworkPolicy: true\n ippoolType: calico\n weaveScopeHost: weave-scope-app.weave\nservicemesh:\n istioPilotHost: http://istiod.istio-system.svc:8080/version\n jaegerQueryHost: http://jaeger-query.istio-system.svc:16686\n servicemeshPrometheusHost: http://prometheus-k8s.kubesphere-monitoring-system.svc:9090\n kialiQueryHost: http://kiali.istio-system:20001\nmulticluster:\n enable: true\n agentImage: 192.168.0.14/kubesphere/tower:v0.2.0\n proxyPublishService: tower.kubesphere-system.svc\nmonitoring:\n endpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090\nlogging:\n host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200\n indexPrefix: ks-logstash-log\nevents:\n host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200\n indexPrefix: ks-logstash-events\nauditing:\n enable: true\n host: http://elasticsearch-logging-data.kubesphere-logging-system.svc:9200\n indexPrefix: ks-logstash-auditing\n\nalerting:\n prometheusEndpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090\n thanosRulerEndpoint: http://thanos-ruler-operated.kubesphere-monitoring-system.svc:10902\n thanosRuleResourceLabels: thanosruler=thanos-ruler,role=thanos-alerting-rules\n"},"kind":"ConfigMap","metadata":{"annotations":{},"name":"kubesphere-config","namespace":"kubesphere-system"}}creationTimestamp: "2021-08-09T07:17:35Z"managedFields:- apiVersion: v1fieldsType: FieldsV1fieldsV1:f:data:.: {}f:kubesphere.yaml: {}f:metadata:f:annotations:.: {}f:kubectl.kubernetes.io/last-applied-configuration: {}manager: kubectloperation: Updatetime: "2021-08-09T07:17:35Z"name: kubesphere-confignamespace: kubesphere-systemresourceVersion: "8563"uid: e86492f2-d28f-4b8e-bcfb-1b19b193661e

最后別忘記修改apiserevr的地址

[root@master .kube]# kubectl get ep NAME ENDPOINTS AGE fuseim.pri-ifs <none> 80d kubernetes 192.168.0.2:6443 81d

總結

以上是生活随笔為你收集整理的Kubesphere 多集群管理 启用多集群的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

亚洲欧美国产精品久久久久 | 国产精品日韩久久久久 | 天天干天天综合 | 极品中文字幕 | 欧美在线视频一区二区 | 香蕉在线播放 | 欧美日韩亚洲一 | 在线看片91 | 福利片视频区 | 国产视频 亚洲精品 | 成片人卡1卡2卡3手机免费看 | 国产精品久久久久久久久久久久午夜片 | 黄色免费视频在线观看 | 久久精品一区八戒影视 | 日本 在线 视频 中文 有码 | 国产日韩精品一区二区三区在线 | 亚洲九九九在线观看 | 黄色小网站在线 | 亚洲综合色丁香婷婷六月图片 | 亚洲精品国产精品久久99 | 9i看片成人免费看片 | 亚洲第一久久久 | 日韩在线观 | 国产精品美 | 中文字幕 国产视频 | 天天操天天爱天天干 | 国产精品一区二区三区免费视频 | 久久久久伊人 | 在线日韩av | 久久久久久久免费看 | 欧美日韩精品在线观看视频 | 国产中文欧美日韩在线 | 久久久久久国产精品免费 | 不卡精品视频 | 亚洲精品小视频 | 九色porny真实丨国产18 | 丝袜护士aⅴ在线白丝护士 天天综合精品 | 久久久伊人网 | 中文字幕色网站 | 天天射综合网站 | 免费看91的网站 | 亚洲精品456在线播放 | 麻豆视频在线免费观看 | 国产精品自拍在线 | 综合伊人久久 | 日本xxxx裸体xxxx17 | 亚洲日本成人 | 久久免费在线视频 | 天天操夜夜摸 | 久久99国产一区二区三区 | 日韩精品资源 | 免费看的黄色的网站 | 亚州精品天堂中文字幕 | 91av小视频 | 日韩免费电影一区二区 | 18久久久久久 | 中文字幕在线看视频国产中文版 | 亚洲一区网 | 婷婷视频导航 | 日韩欧美视频免费在线观看 | 在线观看一区 | 欧美激情第八页 | 人人草人 | 午夜精品久久久久久99热明星 | 欧美性高跟鞋xxxxhd | 国产精品激情偷乱一区二区∴ | 久久精品1区2区 | 蜜臀av网站 | 久久成人高清视频 | 欧美一级免费高清 | 99免费在线视频观看 | 三级黄色理论片 | 午夜91视频| 日韩精品1区2区 | 91亚洲精品久久久中文字幕 | 日韩欧美大片免费观看 | 精品一区久久 | 国产精品免费看久久久8精臀av | 国产精品女人久久久 | 丁香激情视频 | 日韩成人中文字幕 | 日日操日日干 | 中文字幕a在线 | 午夜精品一区二区三区可下载 | 免费av高清 | 麻豆一精品传二传媒短视频 | 麻豆视频国产精品 | 久草成人在线 | www.久久99 | 波多野结衣在线视频免费观看 | 色综合激情网 | 欧美日韩二区三区 | 久久视屏网 | 成人国产精品久久久 | 91精品老司机久久一区啪 | 亚洲日本精品 | 天天操天天舔天天干 | 国产精品久久久久久一区二区 | 国产香蕉97碰碰碰视频在线观看 | 人成午夜视频 | 狠狠狠狠干 | 欧美日韩1区 | 久久免费看a级毛毛片 | 三级动态视频在线观看 | 国产精品夜夜夜一区二区三区尤 | 97电影院在线观看 | 久久艹在线 | 亚洲1区在线 | 天天爽夜夜爽精品视频婷婷 | 中国一级片视频 | 色婷婷亚洲综合 | 午夜影院一级片 | 日韩xxxxxxxxx | 操操操人人 | 热久久免费国产视频 | 亚洲 中文字幕av | 久久久久久久久久久综合 | 欧美久久久久久久久久 | 日韩视频中文 | 日韩中文字幕在线 | 国产成人在线观看免费 | 日韩久久在线 | av中文字幕网站 | 久久久久亚洲国产精品 | 韩国av在线播放 | 亚洲五月婷婷 | 国产在线资源 | 日韩毛片在线播放 | 黄色成人av| 久久永久免费视频 | 国产中文字幕视频在线 | 国产片网站| 九九九热精品免费视频观看网站 | 麻豆成人精品 | 91麻豆精品一区二区三区 | www.久久色| 免费看污黄网站 | 五月婷婷狠狠 | 日本精品一区二区三区在线播放视频 | 日韩成人免费电影 | 国产一级电影在线 | 涩涩成人在线 | 中文字幕在线播放一区二区 | 久久久久久久久久久影视 | 日韩精品久久中文字幕 | 黄色aaa毛片| 夜夜夜夜操 | 久久久久伦理电影 | 韩日av一区二区 | 欧美成人影音 | 欧美日韩中文国产一区发布 | 久久96国产精品久久99漫画 | av电影久久 | 色婷婷综合在线 | 手机在线永久免费观看av片 | 精品久久综合 | 亚洲精品一区二区精华 | 一区二区日韩av | 欧美一区二区三区四区夜夜大片 | 国产精品igao视频网入口 | 天天操夜夜做 | 欧美极品少妇xbxb性爽爽视频 | 日韩专区视频 | 三日本三级少妇三级99 | 天天操天天干天天操天天干 | 久久久久成人精品亚洲国产 | 狠狠88综合久久久久综合网 | 免费精品视频 | 午夜影院一级 | a级国产乱理论片在线观看 伊人宗合网 | 就色干综合| 丁香激情综合久久伊人久久 | 久久久成人精品 | 99re中文字幕 | 午夜在线看片 | 久久久免费视频播放 | 久久免费视频网 | 中国黄色一级大片 | 色在线中文字幕 | 中文字幕av在线免费 | 手机av电影在线观看 | 日韩av中文字幕在线 | 人人插超碰 | 爱情影院aqdy鲁丝片二区 | 色在线免费视频 | 日韩草比| 亚洲精品国产精品乱码在线观看 | 在线中文字幕播放 | 日韩激情在线视频 | 一本一道久久a久久精品蜜桃 | 国产免费久久 | 四虎免费av | 免费观看国产精品视频 | 国产一区二区在线精品 | 麻豆传媒视频在线免费观看 | 一区二区三区精品在线视频 | 色在线高清 | aaa免费毛片 | 久久久福利影院 | 91爱爱电影 | 激情五月婷婷激情 | 涩涩网站免费 | 又黄又刺激的视频 | 国产精品久久久久影院日本 | 这里只有精品视频在线观看 | 国产精品美女久久 | 日韩网站视频 | 日韩av看片 | 亚洲精品在线免费播放 | 亚洲精品一区二区精华 | 日韩xxxbbb | 国产精品激情偷乱一区二区∴ | 亚洲精品乱码久久 | 午夜精品久久久久久中宇69 | 日韩高清片 | 伊人中文在线 | 亚洲免费av在线播放 | 久久久久久久久久久久影院 | 日韩在线观看第一页 | 成人久久久久久久久 | 国产精品久久久99 | 色综合a| 国偷自产中文字幕亚洲手机在线 | 国产97碰免费视频 | 欧美综合干 | 精品国产一区二区三区四区vr | 久久艹99| 精品a视频 | 国产一级精品绿帽视频 | 中文字幕视频网 | 黄网站色欧美视频 | 亚洲精品国产精品乱码在线观看 | 99成人免费视频 | 日韩天天操| 波多野结衣电影一区二区 | av黄色在线观看 | 人人爽人人 | 国产在线高清视频 | 高清不卡毛片 | 日韩电影一区二区在线观看 | 91香蕉视频黄 | 国产精品国产亚洲精品看不卡15 | 欧美性色综合 | 国产精品免费在线播放 | 国产精品午夜av | 久久久久国产一区二区三区四区 | 国产一区视频免费在线观看 | www国产亚洲精品久久网站 | 免费97视频 | 久草国产在线观看 | 国产伦理一区二区三区 | 日韩二区在线观看 | 黄色录像av | 国产黄av | 香蕉视频网站在线观看 | 中文字幕丝袜美腿 | 欧美精品久久人人躁人人爽 | 99视频在线观看一区三区 | 亚洲欧美激情精品一区二区 | 日韩免费在线视频观看 | 国内精品在线看 | 久久91网 | 人人澡av | 日韩中文字幕国产精品 | 成人在线观看资源 | 中文字幕制服丝袜av久久 | 日韩特级毛片 | 蜜臀av网址 | 日韩视频一区二区在线 | 在线观看黄网站 | 欧美大片www | 国产精品青草综合久久久久99 | 欧洲精品在线视频 | 国产黄免费 | 人成电影网 | 日韩免费观看一区二区三区 | 九九视频这里只有精品 | av在线日韩| 亚洲精品影院在线观看 | 久久久久亚洲精品国产 | 黄色精品久久 | 在线免费亚洲 | 日韩网站在线免费观看 | 色88久久 | 国产手机视频在线播放 | 波多野结衣小视频 | 亚洲v精品 | 欧美日韩在线免费视频 | 色婷婷九月| 女人18毛片90分钟 | 日韩电影在线观看一区 | 欧美极品在线播放 | 亚洲天堂精品 | 欧美精品在线观看免费 | 美女网站在线观看 | 精品夜夜嗨av一区二区三区 | 国产亚洲精品日韩在线tv黄 | 日韩欧美在线综合网 | 在线观看精品视频 | 日韩理论在线视频 | 色综合久 | 久久99精品国产 | 黄色的网站免费看 | a在线免费观看视频 | 国产一区二区久久久久 | 国产资源在线播放 | 亚洲h在线播放在线观看h | 亚洲精品免费在线观看视频 | 夜色资源站国产www在线视频 | 麻豆传媒视频在线 | 久99久在线| 久久99亚洲网美利坚合众国 | 日韩激情中文字幕 | 九九免费视频 | 米奇狠狠狠888 | 蜜臀av网站 | 日韩中文字幕视频在线观看 | 中文字幕在线免费观看视频 | 四虎影院在线观看av | 国内精品久久久久影院一蜜桃 | av中文字幕亚洲 | 久久99中文字幕 | www国产亚洲精品久久麻豆 | 欧美日韩亚洲精品在线 | 人人爽夜夜爽 | 国产精品久久久久久欧美 | 国产黄色理论片 | 日韩三区在线观看 | 亚洲美女在线一区 | 精品在线观看一区二区 | 午夜男人影院 | 亚洲一级黄色av | 欧美在线aaa | 婷婷国产视频 | 综合色婷婷| 中文字幕在线观看免费高清完整版 | 久久综合免费 | 免费在线激情视频 | av在线超碰 | 国产精品久久久久久久午夜片 | 五月天婷婷在线播放 | 奇米网在线观看 | 日日躁天天躁 | 久久午夜鲁丝片 | 99国产精品 | 日韩免费一区二区三区 | 国产男女爽爽爽免费视频 | 特黄一级毛片 | a级一a一级在线观看 | 一区二区三区免费在线观看视频 | 狠狠的干狠狠的操 | 91热这里只有精品 | 成人小视频在线观看免费 | 激情丁香5月 | 国产亚洲精品美女久久 | 夜色资源站国产www在线视频 | 中文字幕国产亚洲 | 久久高清毛片 | 亚洲免费资源 | 日本性高潮视频 | 国产高清中文字幕 | 精品国产一区二 | 国产精品久久一区二区三区, | 国产精品一区二区久久精品 | 三级视频片 | 国产成人精品国内自产拍免费看 | 在线导航福利 | 99色在线观看 | 欧美日韩一区久久 | 91秒拍国产福利一区 | 久久黄色小说视频 | 日本中文字幕在线 | 久久国产午夜精品理论片最新版本 | 九九热精品视频在线播放 | 五月婷婷视频在线 | 亚洲视频网站在线观看 | 亚洲欧美日韩精品一区二区 | 欧美在线观看小视频 | 黄网站免费看 | 日本三级中文字幕在线观看 | 日韩精品在线视频免费观看 | 欧美久久久久久久久久 | 在线观看精品一区 | 日韩高清dvd | 久久久福利影院 | av成人动漫 | 亚洲国产午夜精品 | 99热超碰 | 99久热在线精品 | 成人久久久久久久久久 | 亚洲欧美日韩精品久久久 | 久久久亚洲麻豆日韩精品一区三区 | 丁香在线视频 | 亚洲专区在线视频 | 五月天综合 | 欧美一级片免费播放 | 国产亚洲精品精品精品 | 欧美日韩国产亚洲乱码字幕 | 免费观看国产视频 | 亚洲国产精彩中文乱码av | av丁香| a级一a一级在线观看 | 欧美精品国产综合久久 | 国产精品99久久久久的智能播放 | 五月综合色 | 国产五月婷婷 | 国产成人精品久久久久 | 精品久久片 | 日本久久中文 | 91传媒在线 | 久操久| www视频免费在线观看 | 亚洲狠狠操 | 亚洲每日更新 | 亚洲精品男女 | 久久免费黄色 | 亚洲每日更新 | 最近中文字幕国语免费高清6 | 国产手机视频在线播放 | 午夜视频福利 | 蜜臀av性久久久久蜜臀aⅴ四虎 | 色婷丁香 | 日韩av网站在线播放 | 欧美激情第八页 | 狠狠干 狠狠操 | 九九免费在线观看 | 日韩精品视频在线观看网址 | 免费观看国产精品 | 久草网在线视频 | 久久久精品电影 | 麻豆视频免费在线观看 | 九九免费精品视频 | 国产亚洲精品福利 | 99视频这里有精品 | 亚洲理论在线观看电影 | 国产成人三级在线观看 | 久久综合五月天 | 黄色中文字幕 | 在线观看v片 | 欧美日韩一区二区在线观看 | 国产一在线精品一区在线观看 | 欧美疯狂性受xxxxx另类 | 日本久久精 | 久久久综合色 | 日韩精品无码一区二区三区 | 黄色免费观看 | 国产伦理剧| 欧美黄色高清 | 婷婷丁香激情五月 | 一区二区三区中文字幕在线观看 | 射九九| 成人毛片一区二区三区 | 91少妇精拍在线播放 | 色在线视频网 | 精品无人国产偷自产在线 | 久久久久免费电影 | 在线观看911视频 | 久草精品视频在线观看 | 2019中文最近的2019中文在线 | a√资源在线 | 久久久九色精品国产一区二区三区 | 337p西西人体大胆瓣开下部 | 午夜视频在线观看一区二区三区 | 色九色| 久久久久久久久久久高潮一区二区 | 国产精品1区 | av免费看电影 | 欧美综合色 | 国产91全国探花系列在线播放 | 久草网视频在线观看 | 在线观看亚洲精品 | 麻豆传媒在线免费看 | 国产福利中文字幕 | 久久天堂网站 | 成人在线视 | 91在线精品秘密一区二区 | 狠狠操在线 | 精品国产综合区久久久久久 | 99热99re6国产在线播放 | 天天射天天艹 | 精品久久久久久国产偷窥 | 在线亚洲高清视频 | 亚洲精品国产品国语在线 | 美女搞黄国产视频网站 | 日韩美女久久 | 欧美色图狠狠干 | 中文字幕在线人 | 天天干夜夜爱 | 日韩av不卡在线播放 | 久久久69 | 一区二区网 | 天天插天天 | 国产玖玖在线 | 夜夜夜夜爽 | 久久久久观看 | 精品福利在线 | 国产精品亚洲成人 | 日韩在线视频线视频免费网站 | 很黄很黄的网站免费的 | 中文字幕日本电影 | 成人作爱视频 | 日韩激情在线 | 黄色片视频免费 | 一区二区三区手机在线观看 | 色欧美88888久久久久久影院 | 麻豆视频在线免费看 | av中文字幕剧情 | 中文字幕一二 | 日韩精品一区二区三区不卡 | 视频 天天草 | 精品字幕在线 | 亚洲国产精品推荐 | av福利在线 | 中文字幕91视频 | 成年人免费在线观看 | 欧美午夜精品久久久久久孕妇 | 久久久久久久久久久综合 | 色中文字幕在线观看 | 黄色一级免费电影 | 日韩在线观看视频一区二区三区 | 久久精品直播 | 欧美贵妇性狂欢 | 免费在线色视频 | 久久久久久久久久久电影 | 精品国产aⅴ一区二区三区 在线直播av | 国产在线观看地址 | 精品视频123区在线观看 | 欧美福利久久 | 狠狠干综合网 | 在线观看亚洲国产 | 黄色成人在线 | 91免费在线看片 | 美腿丝袜一区二区三区 | 999成人免费视频 | 色综合婷婷久久 | 国产精品孕妇 | 国产成人61精品免费看片 | 激情在线网站 | 毛片网免费 | www.色的| 在线观看黄色av | 五月激情亚洲 | 免费韩国av | 国产不卡在线播放 | 亚洲精品国产精品国 | 欧美激情另类 | 国产美女视频网站 | 色老板在线| 亚洲精品国产电影 | 色偷偷88欧美精品久久久 | 天天做夜夜做 | 成人久久国产 | 国产亚洲字幕 | 国产精品久久久久四虎 | 蜜臀久久99精品久久久无需会员 | 中文字幕在线日 | 亚洲区另类春色综合小说 | 天天操天天综合网 | 国产三级av在线 | 免费大片黄在线 | 欧美性生活免费看 | 四虎成人精品 | 青春草免费在线视频 | 丁香六月婷婷综合 | 69亚洲精品 | 免费观看黄 | 日韩精品免费一区二区 | 日韩欧美在线视频一区二区三区 | 成人va在线观看 | 精品日韩av| 在线观看va| 久久综合久色欧美综合狠狠 | 日韩高清在线不卡 | 免费看污片 | 91视频最新网址 | 少妇按摩av| 日日爱视频| 91视频中文字幕 | .精品久久久麻豆国产精品 亚洲va欧美 | 精品少妇一区二区三区在线 | 国产精品日韩久久久久 | 亚洲精品麻豆 | 天天操天天色天天射 | 中文字幕一区二区在线观看 | 天天操天天操天天操天天操天天操天天操 | 日本少妇久久久 | 婷婷在线色 | 日韩欧美在线免费观看 | 国产视频日韩视频欧美视频 | 亚洲午夜精品久久久久久久久 | 超碰成人免费电影 | 激情自拍av | 人人干人人模 | 天天伊人网 | 操操日| 国产精品久久久久久久久久久久久久 | 亚洲一区日韩 | 久久精品国产亚洲 | 香蕉视频日本 | 丁香六月国产 | 免费看国产视频 | 一区二区三区中文字幕在线观看 | 色婷婷av一区 | www日韩视频 | 毛片888 | 在线观看日韩av | 国产精品四虎 | 99re国产视频| 日韩精品一区二区在线观看视频 | 欧美天天干 | 欧美精品在线免费 | 中文字幕在线免费观看 | 91av片| www黄色大片 | 五月婷网 | 亚洲精品xxx | 国产99区 | 久久免费美女视频 | 久久草av| 欧美视屏一区二区 | 久草国产视频 | 综合色综合色 | 色多多在线观看 | 在线黄色免费 | 久久一区二区三区超碰国产精品 | 在线中文字幕网站 | 天天摸天天干天天操天天射 | 中文字幕大全 | 久草在线最新免费 | 日韩在线观看高清 | 国产精品乱码一区二区视频 | 日韩免费在线观看视频 | 福利视频午夜 | 91超级碰碰 | 亚洲人在线7777777精品 | www91在线| 视频国产精品 | 国产在线中文字幕 | 五月天开心 | 91久久久久久国产精品 | 亚洲欧美综合精品久久成人 | 久久福利综合 | 日韩av免费大片 | 97网站| 欧美高清视频不卡网 | 天天操天天干天天综合网 | 热久久最新地址 | 欧美日韩一级在线 | 黄色在线免费观看网站 | 四虎国产精 | 午夜影院一级片 | 在线中文字幕播放 | 超碰人人在线 | 久久精品99| 午夜视频免费在线观看 | 在线观看av不卡 | www免费网站在线观看 | 99在线视频精品 | 中文字幕日韩国产 | 欧美激情视频久久 | 久操免费视频 | 久久人人爽人人爽人人 | 91av看片 | 天天操天天操一操 | 一区二区亚洲精品 | 精品久久久久国产 | 国产偷国产偷亚洲清高 | 亚洲精品激情 | 亚洲天堂精品视频在线观看 | 国产精品久久久久永久免费观看 | 伊在线视频 | 欧美黑人性爽 | 欧美 激情 国产 91 在线 | 91视视频在线直接观看在线看网页在线看 | 黄色网址中文字幕 | 久久久综合九色合综国产精品 | 丁香五月缴情综合网 | 婷婷色站 | 成人一级黄色片 | 美女免费视频网站 | 日日爱夜夜爱 | 97综合在线| 成人欧美一区二区三区在线观看 | 亚洲精品乱码久久久久久写真 | 婷婷五月色综合 | 国产婷婷精品 | 天天摸天天干天天操天天射 | 玖玖爱国产在线 | 午夜影院三级 | 久久深夜 | 91精品在线免费观看视频 | 精品99999 | 69久久久| 国内精品久久久久久久久久久 | 日韩久久久久久久久久 | 中文字幕韩在线第一页 | 色老板在线视频 | 91精品第一页 | 高清久久久久久 | 国产123av| 国产成人三级一区二区在线观看一 | 91片在线观看 | 99热超碰在线 | 久久久久影视 | 丁香午夜婷婷 | 国产精品一区二区麻豆 | 天天干,天天干 | 色5月婷婷 | 亚洲精品视频中文字幕 | 国产高清av | 91欧美在线 | 男女拍拍免费视频 | 国产成人精品av | 亚洲成人黄色 | 国产精品涩涩屋www在线观看 | 黄色网在线免费观看 | 国产精品99久久久久的智能播放 | 色综合国产 | 成人黄色av免费在线观看 | 一级片视频在线 | 蜜臀av网站| 久久免费电影网 | 国产在线美女 | 亚洲资源视频 | 精品一区二区久久久久久久网站 | 国产一区成人在线 | 91大神电影 | 99免费精品 | 精品96久久久久久中文字幕无 | 超碰国产在线播放 | 久久婷婷五月综合色丁香 | 99精品一区 | 国精产品999国精产品岳 | 毛片永久新网址首页 | 麻豆手机在线 | 99日韩精品 | 日韩欧美在线视频一区二区 | 国内精品久久久久国产 | 西西人体4444www高清视频 | 婷婷干五月| 成人一区二区三区在线 | 亚洲国产成人久久 | 综合天堂av久久久久久久 | 久久精选视频 | 五月天com| 国产黄色特级片 | 国产精品99久久久久人中文网介绍 | 夜夜澡人模人人添人人看 | 四虎成人免费影院 | 国产色在线,com | 超碰在线99 | 四虎国产视频 | 六月丁香综合网 | 精品极品在线 | 在线日本看片免费人成视久网 | 人人玩人人添人人澡超碰 | 99精品在这里 | 免费在线观看av网站 | 国产精品一区二区久久精品爱微奶 | 日本性高潮视频 | 久草在线视频在线观看 | 日日草夜夜操 | 国产精品久久久久永久免费观看 | 激情五月看片 | 国产一区二区在线播放视频 | 亚洲精品视频二区 | 亚洲一级黄色大片 | 成人免费观看完整版电影 | 狠狠狠色丁香综合久久天下网 | 狠狠狠色丁香综合久久天下网 | 特级a老妇做爰全过程 | 色五月成人 | 欧美日韩另类在线观看 | 免费黄色av | 偷拍区另类综合在线 | 欧美日韩中文国产一区发布 | 亚洲另类视频在线观看 | 中文字幕精品久久 | 久久成人综合 | 涩涩网站在线看 | 欧美激情第28页 | 久久成人精品视频 | 亚洲国产资源 | 最近中文字幕免费av | 成年人在线观看视频免费 | 国产精品女人网站 | 久久成人18免费网站 | 在线视频电影 | 国产精品va视频 | 日韩中文字幕一区 | 日韩精品一区二区免费视频 | 国产精品久久久久久久电影 | 九九在线高清精品视频 | 久久电影中文字幕视频 | 毛片一二区 | 成人9ⅰ免费影视网站 | 美女啪啪图片 | 一级一级一片免费 | 中文字幕欲求不满 | 99精品色 | 亚洲精品综合一二三区在线观看 | 国产精品麻豆99久久久久久 | 99热这里只有精品国产首页 | av色影院| 成人禁用看黄a在线 | 992tv成人免费看片 | 99久久精品国产系列 | 岛国av在线免费 | 欧美日韩不卡在线视频 | 五月天久久久久久 | 成人国产精品电影 | 天天操天天艹 | 嫩草伊人久久精品少妇av | 91精品国产一区二区三区 | 国产综合在线观看视频 | 精品福利在线视频 | 在线播放亚洲 | 中文字幕在线观看1 | 超碰在97 | 日精品| 美女网站在线 | 国产一级高清视频 | 亚洲一区二区三区毛片 | 黄色三级免费网址 | 九九亚洲精品 | 国产精品久久久久免费a∨ 欧美一级性生活片 | 亚洲免费在线看 | 99国产在线| 美女国内精品自产拍在线播放 | 成人黄色在线看 | 精品欧美一区二区精品久久 | 国产91成人在在线播放 | 99热这里只有精品在线观看 | 一区二区三区免费在线观看 | 黄色av影院 | 少妇性aaaaaaaaa视频 | 成人免费xxx在线观看 | 成年人免费电影在线观看 | 操久在线 | 亚洲免费观看视频 | 国产精品高潮在线观看 | 伊人天天干 | 国产麻豆精品传媒av国产下载 | 中文字幕av在线不卡 | 久久精品1区 | www.天天操 | 五月天婷亚洲天综合网精品偷 | 日韩色视频在线观看 | 国产精品自产拍在线观看桃花 | 国产成人精品免费在线观看 | 日韩高清dvd | 久久婷婷亚洲 | 99视频99 | 亚洲综合视频在线 | 国产小视频你懂的 | 日韩免费中文字幕 | 免费一级片视频 | 国产色久| 国产99久久久精品 | 九草在线视频 | 欧美日韩视频一区二区三区 | 天天天插| 久久久久久久久久久福利 | 日韩精品中字 | av成人在线播放 | 在线观看av国产 | 色偷偷中文字幕 | 中国一级片在线 | 国产精品久久久久久久久岛 | 黄色在线网站噜噜噜 | 一区二区视频在线免费观看 | 国产精品门事件 | 亚洲精品在线免费 | 97香蕉超级碰碰久久免费软件 | 91亚洲精品乱码久久久久久蜜桃 | 日本久久久精品视频 | 人人爱人人舔 | 久草视频在线免费 | 久久精品4| 成人综合免费 | 99国产情侣在线播放 | 在线观看视频亚洲 | 狠狠搞,com | 久久久久久久久久久影视 | 日韩欧美视频一区二区 | av网站在线观看播放 | 久久a v视频 | 久久久久久久久久久电影 | 91.精品高清在线观看 | 成人黄色大片在线免费观看 | 在线观看小视频 | www.色婷婷 | 最近乱久中文字幕 | 狠狠色丁香婷婷综合欧美 | 亚洲成人精品影院 | 久久系列 | 97理论电影 | 国产精品21区 | 综合天天久久 | 欧美一级片在线 | 国产在线理论片 | 在线一二三四区 | 国产小视频在线观看免费 | 婷婷社区五月天 | 免费网站观看www在线观看 | 天天五月天色 | 天天操天天爱天天干 | 久久欧美综合 | 国产无遮挡又黄又爽馒头漫画 | 免费成人av电影 | 99超碰在线播放 | 婷婷精品国产欧美精品亚洲人人爽 | 伊在线视频 | 婷婷激情在线 | 91av亚洲 | 久久综合电影 | 欧洲av不卡 | 在线观看精品黄av片免费 | 久久激情视频 久久 | 黄网站色 | 久久精品国产第一区二区三区 | 91cn国产在线| 国产老太婆免费交性大片 | 久久y | www.黄色在线 | 久久免费视频一区 | 天天插天天狠 | 天天操天天干天天干 | 激情五月看片 | 最新在线你懂的 | 欧美九九九 | 欧美精品一区二区蜜臀亚洲 | 91丨九色丨蝌蚪丰满 | 国产精品电影在线 | 韩国精品视频在线观看 | 五月婷婷另类国产 | 97超碰资源站 | 超碰97国产在线 | 欧美激情精品久久久 | 夜夜夜草 | 热久在线 | 中文字幕网址 | 久久福利国产 | 久久久久免费视频 | 999在线视频 | 在线中文字幕av观看 | 波多野结衣在线观看一区 | 在线观看视频h | 欧美黑人性猛交 | 中文字幕av专区 | 精品一二三区 | 日韩av一区在线观看 | 99视频播放 | a视频在线看 | 97视频中文字幕 | www.夜夜骑.com | 最近免费中文字幕mv在线视频3 | 国产精品专区h在线观看 | 亚洲a色| 成人影音av | 国产最新在线 | 日韩黄色在线电影 | 精品久久一区 | 亚洲成a人片在线观看网站口工 | 国产91国语对白在线 | www免费看片com | 久久久久久久国产精品影院 | 99精品国产99久久久久久福利 | 99久久精 | 亚洲精品视 | 日韩啪啪小视频 | 亚洲精品国产第一综合99久久 | 在线观看av的网站 | 97av在线视频 | 国产成人精品一区二区三区网站观看 | 成人动态视频 | 高清国产在线一区 | 国产一级大片在线观看 | 日韩一区在线免费观看 | 麻豆小视频在线观看 | 久久久久久久久久久久久国产精品 | 国产精品毛片久久久久久 | 五月导航 | 精品国产欧美 | 天天爱综合| 日本精品久久 | 亚洲日本成人 | 黄色小说在线观看视频 | 视频在线在亚洲 | 黄色毛片在线 | 国语对白少妇爽91 | 懂色av懂色av粉嫩av分享吧 | 黄色一级大片在线免费看产 | 日韩精品一区二区三区免费观看视频 | 在线播放精品一区二区三区 | 久久高清视频免费 | 亚洲一区精品人人爽人人躁 | 亚洲精品一区二区三区高潮 |