日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

MPP install

發布時間:2023/12/10 编程问答 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 MPP install 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

greenplum install

注意事項:
1.hostname 不能大寫##
2.如果segment和mirror副本數比較大,建議調整/etc/ssh/sshd_config的maxconnect數值
3.系統參數需要修改kernel.sem = 500 1024000 200 8192 ##############這個配置是三個節點 6塊磁盤,每個磁盤6個segment 6個mirror 如果segment超過這個比例的話,需要對應調整sem的參數
4.要使用gpadmin這個用戶安裝軟件 vim /etc/sudoers 賦予gpadmin root的權限
# User privilege specification
root ALL=(ALL:ALL) ALL
gpadmin ALL=(ALL:ALL) ALL

?

安裝步驟
一.master standby work節點系統參數調整

1.1用戶準備
sudo groupadd -g 530 gpadmin
sudo useradd -g 530 -u 530 -m -d /home/gpadmin -s /bin/bash gpadmin
sudo chown -R gpadmin:gpadmin /home/gpadmin/
sudo passwd gpadmin

sudo vim /etc/hosts
# hosts for greenplum
192.168.0.200 mpp01
192.168.2.201 mpp02
192.168.0.202 mpp03

su gpadmin
#免密登陸
ssh-keygen -t rsa
cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
chmod 600 ~/.ssh/authorized_keys
chmod 700 ~/.ssh
ssh-copy-id mpp02
ssh-copy-id mpp03

#####修改ubuntu18.04的主機名
沒有這個文件創建這個文件
/etc/cloud/cloud.cfg
preserve_hostname: true

1.2 系統參數優化
#參考文檔:https://blog.csdn.net/ctypyb2002/article/details/84107389
sudo vim /etc/sysctl.conf
xfs_mount_options = rw,noatime,inode64,allocsize=16m ###如果不修改這個gpcheck會提示異常
kernel.shmmax = 500000000
kernel.shmmni = 4096
kernel.shmall = 4000000000
#kernel.sem = 500 1024000 200 8192 (108個segment及其以上,使用這個sem參數)
kernel.sem = 500 1024000 200 4096 (108個segment以下,使用這個sem參數)
kernel.sysrq = 1
kernel.core_uses_pid = 1
kernel.msgmnb = 1265536
kernel.msgmax = 1265536
kernel.msgmni = 2048
net.ipv4.tcp_syncookies = 1
net.ipv4.ip_forward = 0
net.ipv4.conf.default.accept_source_route = 0
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_max_syn_backlog = 4096
net.ipv4.conf.all.arp_filter = 1
net.ipv4.ip_local_port_range = 1025 65535
net.core.netdev_max_backlog = 10000
net.core.rmem_max = 2097152
net.core.wmem_max = 2097152
vm.overcommit_memory = 2


sudo sysctl -p

1.3 #修改打開文件句柄的數量
vim /etc/security/limits.conf
* soft nofile 65536
* hard nofile 65536
* soft nproc 131072
* hard nproc 131072

?

1.4 #設置磁盤訪問I/O調度策略(stat磁盤 選擇deadline )
Linux磁盤I/O調度器對磁盤的訪問支持不同的策略,默認的為CFQ,GP建議設置為deadline 要查看某驅動器的I/O調度策略,可通過如下命令查看,下面示例的為正確的配置:
# cat /sys/block/{devname}/queue/scheduler
noop anticipatory [deadline] cfq
針對我們服務器上的磁盤 修改i/o調度策略
echo deadline > /sys/block/sda/queue/scheduler
echo deadline > /sys/block/sdb/queue/scheduler
echo deadline > /sys/block/sdc/queue/scheduler
echo deadline > /sys/block/sdd/queue/scheduler
echo deadline > /sys/block/sde/queue/scheduler
echo deadline > /sys/block/sdf/queue/scheduler

?

1.5 #打開磁盤預熱
每個磁盤設備文件需要配置read-ahead(blockdev)值為65536
官方文檔的推薦值為16384,但譯者認為應該為65536更合理,該值設置的是預讀扇區數,實際上預讀的字節數是blockdev設置除以2,而GP缺省的blocksize為32KB,剛好與65536(32768B/32KB)對應。
65536/16384 ? 待定 我默認使用官網的配置
/sbin/blockdev --getra /dev/sda
/sbin/blockdev --setra 16384 /dev/sda

/sbin/blockdev --getra /dev/sdb
/sbin/blockdev --setra 16384 /dev/sdb

/sbin/blockdev --getra /dev/sdc
/sbin/blockdev --setra 16384 /dev/sdc

/sbin/blockdev --getra /dev/sdd
/sbin/blockdev --setra 16384 /dev/sdd

/sbin/blockdev --getra /dev/sde
/sbin/blockdev --setra 16384 /dev/sde

/sbin/blockdev --getra /dev/sdf
/sbin/blockdev --setra 16384 /dev/sdf

?

1.6 #修改sshd的配置
vim /etc/ssh/sshd_config
UseDNS no
#PidFile /var/run/sshd.pid
MaxStartups 100:30:1000

?

#添加ubuntu 18.04 開機自啟的服務
sudo vi /etc/systemd/system/rc-local.service
開機任務(https://www.jianshu.com/p/79d24b4af4e5)
[Unit]
Description=/etc/rc.local Compatibility
ConditionPathExists=/etc/rc.local

[Service]
Type=forking
ExecStart=/etc/rc.local start
TimeoutSec=0
StandardOutput=tty
RemainAfterExit=yes
SysVStartPriority=99

[Install]
WantedBy=multi-user.target


sudo vi /etc/rc.local

#!/bin/sh -e
#
# rc.local
#
# This script is executed at the end of each multiuser runlevel.
# Make sure that the script will "exit 0" on success or any other
# value on error.
#
# In order to enable or disable this script just change the execution
# bits.
#
# By default this script does nothing.
netplan apply
exit 0

?

sudo chmod +x /etc/rc.local
sudo systemctl enable rc-local


sudo systemctl start rc-local.service
sudo systemctl status rc-local.service

?

?

?

二、安裝greenplum
###################master和standby work節點(mpp集群每個節點都要執行)

2.1 安裝gp-xercesc
git clone https://github.com/greenplum-db/gp-xerces.git
cd gp-xerces
mkdir build
cd build
../configure --prefix=/usr/local && make -j64
sudo make -j64 install

#安裝re2c
tar -zxvf re2c-1.1.1.tar.gz
cd re2c-1
./configure
make -j4
sudo make -j4 install

#安裝ninja
tar -zxvf ninja-1.9.0.tar.gz
cd ninja
./configure.py --bootstrap
sudo cp -rp ninja /usr/bin

2.2 安裝gporca
git clone https://github.com/greenplum-db/gporca.git
cd gporca-3.39.0/
sudo apt install cmake
cmake -GNinja -H. -Bbuild
sudo ninja install -C build


2.3 master節點安裝gpdb(mpp的master節點執行)

git clone https://github.com/greenplum-db/gpdb.git ####選擇合適的gpdb版本https://github.com/greenplum-db/gpdb/releases/ #我選擇的版本是https://github.com/greenplum-db/gpdb/releases/tag/6.0.0-beta.3
cd gpdb
######安裝需要的依賴關系
sudo ./README.ubuntu.bash
#將這個腳本拷貝到mpp其他的節點 安裝基礎包
scp ./README.ubuntu.bash gpadmin@mpp02:/home/gpadmin
scp ./README.ubuntu.bash gpadmin@mpp03:/home/gpadmin
此時系統會默認安裝libxerces-c-dev庫,需要將此庫移除以使其正確編譯。

sudo apt remove libxerces-c-dev ###此庫會有沖突
./configure --enable-orca --with-perl --with-python --with-libxml --prefix=/usr/local/gpdb
make -j64 && sudo make -j64 install
#################
sudo ldconfig #################一定要重載庫文件,否則會報沒有已安裝的兩個插件的庫文件(如libgpos.so)

2.4 standby和work節點安裝greenplum
cd /home/gpadmin
######安裝需要的依賴關系
sudo ./README.ubuntu.bash
壓縮master節點greenplum的安裝目錄,然后把壓縮文件拷貝到standby和wodk的節點相同的目錄,然后解壓
tar -czvf gpdb.tar.gz /usr/local/gpdb
scp -rp gpdb.tar.gz gpadmin@mpp02:/home/gpadmin
scp -rp gpdb.tar.gz gpadmin@mpp03:/home/gpadmin
ssh gadmin@mpp02 "cd /home/gpadmin && tar -zxvf gpdb.tar.gz && mv gpdb /usr/local && sudo ldconfig "
ssh gadmin@mpp03 "cd /home/gpadmin && tar -zxvf gpdb.tar.gz && mv gpdb /usr/local && sudo ldconfig "

2.5 修改所有節點gpadmin的環境變量
#master 節點 和standby節點
sudo mkdir -p /data1/master
sudo chown -R gpadmin:gpadmin /data1/master

vim /home/gpadmin/.profile

source /usr/local/gpdb/greenplum_path.sh
export PGPORT=5432
export PGDATABASE=gp_sydb
TZ='Asia/Shanghai'; export TZ
export MASTER_DATA_DIRECTORY=/data1/master/gpseg-1/ #master節點的數據目錄
#然后每個節點執行
sudo ldconfig && source /home/gpadmin/.profile && source /usr/local/gpdb/greenplum_path.sh

?

不重啟刷新磁盤
ls /sys/class/scsi_host/
"---" 將后面的值改為空,重新刷新磁盤
sudo echo "- - -" > /sys/class/scsi_host/host0/scan
sudo echo "- - -" > /sys/class/scsi_host/host1/scan
sudo echo "- - -" > /sys/class/scsi_host/host2/scan
sudo echo "- - -" > /sys/class/scsi_host/host3/scan
sudo echo "- - -" > /sys/class/scsi_host/host4/scan
sudo echo "- - -" > /sys/class/scsi_host/host5/scan
sudo echo "- - -" > /sys/class/scsi_host/host6/scan
sudo echo "- - -" > /sys/class/scsi_host/host7/scan
sudo echo "- - -" > /sys/class/scsi_host/host8/scan
sudo echo "- - -" > /sys/class/scsi_host/host9/scan
sudo echo "- - -" > /sys/class/scsi_host/host10/scan
sudo echo "- - -" > /sys/class/scsi_host/host11/scan
sudo echo "- - -" > /sys/class/scsi_host/host12/scan
sudo echo "- - -" > /sys/class/scsi_host/host13/scan
sudo echo "- - -" > /sys/class/scsi_host/host14/scan
sudo echo "- - -" > /sys/class/scsi_host/host15/scan
sudo echo "- - -" > /sys/class/scsi_host/host16/scan
sudo echo "- - -" > /sys/class/scsi_host/host17/scan
sudo echo "- - -" > /sys/class/scsi_host/host18/scan
sudo echo "- - -" > /sys/class/scsi_host/host19/scan
sudo echo "- - -" > /sys/class/scsi_host/host20/scan
sudo echo "- - -" > /sys/class/scsi_host/host21/scan
sudo echo "- - -" > /sys/class/scsi_host/host22/scan
sudo echo "- - -" > /sys/class/scsi_host/host23/scan
sudo echo "- - -" > /sys/class/scsi_host/host24/scan
sudo echo "- - -" > /sys/class/scsi_host/host25/scan
sudo echo "- - -" > /sys/class/scsi_host/host26/scan
sudo echo "- - -" > /sys/class/scsi_host/host27/scan
sudo echo "- - -" > /sys/class/scsi_host/host28/scan
sudo echo "- - -" > /sys/class/scsi_host/host29/scan
sudo echo "- - -" > /sys/class/scsi_host/host31/scan

#########################################

2.6 初始化準備(segment和mirror)
segment 存放數據
mirror是segment的鏡像
#################每個節點執行掛載
mkfs.xfs /dev/sda
mkfs.xfs /dev/sdb
mkfs.xfs /dev/sdc
mkfs.xfs /dev/sdd
mkfs.xfs /dev/sde
mkfs.xfs /dev/sdf
#自動掛載
vim /etc/fstab
/dev/sda /data1 xfs defaults 0 0
/dev/sdb /data2 xfs defaults 0 0
/dev/sdc /data3 xfs defaults 0 0
/dev/sdd /data4 xfs defaults 0 0
/dev/sde /data5 xfs defaults 0 0
/dev/sdf /data6 xfs defaults 0 0

mount -a

##################
mkdir -p /data{1..6}/primary/s{1..6}
mkdir -p /data{1..6}/mirror/s{1..6}
mkdir /data1/master
chown -R gpadmin:gpadmin /data{1..6}

#########################3個盤 3個segment
sudo mkfs.xfs /dev/sdb
sudo vim /etc/fstab
/dev/sdb /data1 xfs defaults 0 0

sudo mkdir /data1 && sudo mount -a

sudo mkdir -p /data1/primary/s1 ###創建segment數據目錄
sudo mkdir -p /data1/mirror/s1 ###創建mirror數據目錄
sudo mkdir /data1/master
sudo chown -R gpadmin:gpadmin /data1

2.7 初始化greenplum 集群
cd /usr/local/gpdb/docs/cli_help/gpconfigs
cp gpinitsystem_config /home/gpadmin/conf/gp_conf
vim gp_conf

ARRAY_NAME="Greenplum Data Platform"
SEG_PREFIX=gpseg
PORT_BASE=6000
ARRAY_NAME="gp_sydb"
declare -a DATA_DIRECTORY=(/data1/primary/s1 /data1/primary/s2 ) ######每個目錄就是一個segment 集群的segment總數是 當前節點segment目錄數量*mpp集群節點數量
MASTER_HOSTNAME=mpp01
MASTER_DIRECTORY=/data1/master
MASTER_DATA_DIRECTORY=/data1/master/gpseg-1
DATABASE_NAME=gp_sydb
#添加seg_hosts
MACHINE_LIST_FILE=/home/gpadmin/conf/seg_hosts
MASTER_PORT=5432
TRUSTED_SHELL=ssh
CHECK_POINT_SEGMENTS=8
ENCODING=UNICODE
#mirror config
MIRROR_PORT_BASE=43000
REPLICATION_PORT_BASE=34000
MIRROR_REPLICATION_PORT_BASE=44000
declare -a MIRROR_DATA_DIRECTORY=(/data1/mirror/s1 /data1/mirror/s2 ) ######每個目錄就是一個mirror 集群的mirror總數是 當前節點mirror目錄數量*mpp集群節點數量

#####確認mpp節點主機名
cat /home/gpadmin/conf/seg_hosts
mpp01
mpp02
mpp03

#####初始化greenplum
每個節點執行
mkdir -p /data1/primary/s1 /data1/primary/s2 && mkdir -p /data1/mirror/s1 /data1/mirror/s2
########declare -a DATA_DIRECTORY=(/data1/primary/s1 /data1/primary/s2 ) ######每個目錄就是一個segment 集群的segment總數是 當前節點segment目錄數量*mpp集群節點數量
########declare -a MIRROR_DATA_DIRECTORY=(/data1/mirror/s1 /data1/mirror/s2 ) ######每個目錄就是一個mirror 集群的mirror總數是 當前節點mirror目錄數量*mpp集群節點數量
rm -rf /data1/master/gpseg-1
rm -rf /data1/primary/s{1..4}/*

初始化之前:
#在各個節點執行,用來檢查gpdb是否正確安裝,自檢相關的配置文件
gpssh-exkeys -f seg_hosts master到各個節點通信(測試一下免密登陸)
gpcheck --local (檢查每個節點的狀態)
gpinitsystem -c gp_conf -h seg_hosts

?

#遇到的報錯
1.selecting default max_connections ... /usr/local/gpdb/bin/postgres: error while loading shared libraries: libgpopt.so.3: cannot open shared object file: No such file or directory
no data was returned by command ""/usr/local/gpdb/bin/postgres" -V"
The program "postgres" is needed by initdb but was either not found in the same directory as "/usr/local/gpdb/bin/initdb" or failed unexpectedly.
Check your installation; "postgres -V" may have more information.
每個節點重新安裝 插件gporca gp-xercesc 重新加載一下庫文件 sudo ldconfig

#添加配置mirror
2.mirror error
/usr/local/gpdb/bin/gpinitsystem: line 1000: ((: MIRROR_REPLICATION_PORT_OFFSET=-: syntax error: operand expected (error token is "-")
20190517:17:31:29:006271 gpinitsystem:mpp01:gpadmin-[INFO]:-Building group mirror array type , please wait...
./usr/local/gpdb/bin/lib/gp_bash_functions.sh: line 585: 0+: syntax error: operand expected (error token is "+")
20190517:17:31:29:006271 gpinitsystem:mpp01:gpadmin-[INFO]:-Building the Master instance database, please wait...
MIRROR_PORT_BASE=43000
REPLICATION_PORT_BASE=34000
MIRROR_REPLICATION_PORT_BASE=44000

#####################修改添加所有的磁盤做seg和mirror segment和mirror的數量要對應,如果不對應會導致初始化的時候中斷
mkdir
/data1/primary /data1/primary /data1/primary /data1/primary /data1/primary /data1/primary /data2/primary /data2/primary /data2/primary /data2/primary /data2/primary /data2/primary /data3/primary /data3/primary /data3/primary /data3/primary /data3/primary /data3/primary /data4/primary /data4/primary /data4/primary /data4/primary /data4/primary /data4/primary /data5/primary /data5/primary /data5/primary /data5/primary /data5/primary /data5/primary /data6/primary /data6/primary /data6/primary /data6/primary /data6/primary /data6/primary

/data1/mirror /data1/mirror /data1/mirror /data1/mirror /data1/mirror /data1/mirror /data2/mirror /data2/mirror /data2/mirror /data2/mirror /dat
a2/mirror /data2/mirror /data2/mirror /data3/mirror /data3/mirror /data3/mirror /data3/mirror /data3/mirror /data3/mirror /data4/mirror /data4/mirror /data4/mirror /data4/mirror /data4/mirror /data4/mirror /data5/mirror /data5/mirror /data5/mirror /data5/mirror /data5/mirror /data5/mirror /data6/mirror /data6/mirror /data6/mirror /data6/mirror /data6/mirror /data6/mirror /data6/mirror

如果初始化失敗需要刪除mirror和primary里面所有的數據
rm -rf /data{1..6}/primary/s{1..6}/*
rm -rf /data{1..6}/mirror/s{1..6}/*
刪除/data1/master/下所有的數據
rm -rf /data1/master/gpseg-1
########檢查是否存在漏刪的文件:如果存在也會導致初始化報錯,一次初始化檢測,檢查節點的時間比較久,請大家慎重check!
ls -alt /data{1..6}/mirror/s{1..6} && ls -alt /data{1..6}/primary/s{1..6}/
ls -alt /data1/master/
#然后繼續初始化greenplum
gpinitsystem -c gp_conf -h seg_hosts

greenplum 常用的命令說明:
參考文檔:https://www.cnblogs.com/pl-boke/p/9852383.html


########################
添加standby
#gpinitstandby -r -a 刪除故障的standby節點
gpinitstandby -r -a mpp02
##########
20190523:11:00:55:010715 gpstate:mpp01:gpadmin-[WARNING]:-Standby PID = 0 <<<<<<<<
20190523:11:00:55:010715 gpstate:mpp01:gpadmin-[WARNING]:-Standby status = Standby process not running <<<<<<<<

#gpinitstandby -a -s 添加standby的節點
gpinitstandby -a -s mpp02
#添加之前在mpp02 上準備/data1/master/gpseg-1,添加standby master會拷貝master節點的配置到standby master

#查看集群狀態gpstate -f
gpadmin@mpp01:~$ gpstate -f
20190523:11:20:48:011923 gpstate:mpp01:gpadmin-[INFO]:-Starting gpstate with args: -f
20190523:11:20:48:011923 gpstate:mpp01:gpadmin-[INFO]:-local Greenplum Version: 'postgres (Greenplum Database) 6.0.0-beta.1 build dev'
20190523:11:20:48:011923 gpstate:mpp01:gpadmin-[INFO]:-master Greenplum Version: 'PostgreSQL 9.4.20 (Greenplum Database 6.0.0-beta.1 build dev) on x86_64-unknown-linux-gnu, compiled by gcc (Ubuntu 7.4.0-1ubuntu1~18.04) 7.4.0, 64-bit compiled on May 21 2019 14:00:08'
20190523:11:20:48:011923 gpstate:mpp01:gpadmin-[INFO]:-Obtaining Segment details from master...
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:-Standby master details
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:-----------------------
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:- Standby address = mpp02
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:- Standby data directory = /data1/master/gpseg-1
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:- Standby port = 5432
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:- Standby PID = 23755
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:- Standby status = Standby host passive
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--------------------------------------------------------------
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--pg_stat_replication
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--------------------------------------------------------------
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--WAL Sender State: streaming
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--Sync state: sync
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--Sent Location: 0/140000A0
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--Flush Location: 0/140000A0
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--Replay Location: 0/140000A0
20190523:11:20:49:011923 gpstate:mpp01:gpadmin-[INFO]:--------------------------------------------------------------
###############################
模擬故障切換
gpstop -a -m 停掉master的postgres
讓mpp02變成主的master
gpadmin@mpp02:/data1/master/gpseg-1$ gpactivatestandby -a -d /data1/master/gpseg-1
sh: 0: getcwd() failed: No such file or directory
20190523:11:27:44:025254 gpactivatestandby:mpp02:gpadmin-[CRITICAL]:-PGPORT environment variable not set.

solution: check /home/gpadmin/.profile MASTER_DATA_DIRECTORY=/data1/master/gpseg-1/

gpactivatestandby -a -d /data1/master/gpseg-1

#主從切換后需要做數據恢復
TIPS:如果集群出現過primary和Mirror節點的切換,則最好再執行下下面的命令:
gprecoverseg -r 執行這步操作的原因:如果主節點down了,mirror節點接管后,會造成部分節點負擔過重

gpadmin@mpp02:~$ gprecoverseg -r
20190523:13:37:12:010532 gprecoverseg:mpp02:gpadmin-[INFO]:-Starting gprecoverseg with args:
20190523:13:37:12:010532 gprecoverseg:mpp02:gpadmin-[INFO]:-local Greenplum Version: 'postgres (Greenplum Database) 6.0.0-beta.1 build dev'
20190523:13:37:12:010532 gprecoverseg:mpp02:gpadmin-[INFO]:-master Greenplum Version: 'PostgreSQL 9.4.20 (Greenplum Database 6.0.0-beta.1 build dev) on x86_64-unknown-linux-gnu, compiled by gcc (Ubuntu 7.4.0-1ubuntu1~18.04) 7.4.0, 64-bit compiled on May 21 2019 14:00:08'
20190523:13:37:12:010532 gprecoverseg:mpp02:gpadmin-[INFO]:-Obtaining Segment details from master...
LOG: failed to acquire resources on one or more segments
DETAIL: FATAL: no pg_hba.conf entry for host "192.168.22.122", user "gpadmin", database "template1"
(seg18 192.168.22.122:43018)
LOG: query plan with multiple segworker groups is not supported
HINT: likely caused by a function that reads or modifies data in a distributed table
20190523:13:37:17:010532 gprecoverseg:mpp02:gpadmin-[CRITICAL]:-gprecoverseg failed. (Reason='FATAL: DTM initialization: failure during startup recovery, retry failed, check segment status (cdbtm.c:1328)
') exiting...

修改/data1/master/gpseg-1/pg_hba.conf 添加訪問ip到pg_hba.conf
host all gpadmin 172.16.1.114/32 trust
host all gpadmin 172.16.1.115/32 trust
host all gpadmin 172.16.1.116/32 trust
host all gpadmin 192.168.22.111/32 trust
host all gpadmin 192.168.22.122/32 trust
host all gpadmin 192.168.22.133/32 trust

#主備切換之后
Total primary segment failures (at master)

?

[WARNING]:-Total primary segment failures (at master)
[WARNING]:-Total number mirror segments acting as primary segments

#恢復segment mirror
gprecoverseg
#### gpstate -m
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Recovery 72 of 72
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:----------------------------------------------------------
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Synchronization mode = Incremental
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Failed instance host = mpp03
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Failed instance address = mpp03
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Failed instance directory = /data6/primary/s6/gpseg107
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Failed instance port = 6035
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Recovery Source instance host = mpp01
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Recovery Source instance address = mpp01
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Recovery Source instance directory = /data6/mirror/s6/gpseg107
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Recovery Source instance port = 43035
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:- Recovery Target = in-place
20190523:13:44:11:034230 gprecoverseg:mpp02:gpadmin-[INFO]:----------------------------------------------------------

Continue with segment recovery procedure Yy|Nn (default=N): 輸入Y

修復集群
gprecoverseg -a
20190523:13:53:49:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Ensuring that shared memory is cleaned up for stopped segments
20190523:13:53:50:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Updating configuration with new mirrors
20190523:13:53:50:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Updating mirrors
20190523:13:53:50:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Running pg_rewind on required mirrors

檢查集群修復的狀態
gpstate -m
########
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data5/mirror/s6/gpseg65 43029 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s1/gpseg66 43030 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s2/gpseg67 43031 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s3/gpseg68 43032 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s4/gpseg69 43033 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s5/gpseg70 43034 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp03 /data6/mirror/s6/gpseg71 43035 Passive Synchronized
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s1/gpseg72 43000 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s2/gpseg73 43001 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s3/gpseg74 43002 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s4/gpseg75 43003 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s5/gpseg76 43004 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data1/mirror/s6/gpseg77 43005 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data2/mirror/s1/gpseg78 43006 Acting as Primary Not In Sync
20190523:13:53:48:038747 gpstate:mpp02:gpadmin-[INFO]:- mpp01 /data2/mirror/s2/gpseg79 43007 Acting as Primary Not In Sync
#####
修復成功
20190523:14:00:32:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-For segments updated successfully, streaming will continue in the background.
20190523:14:00:32:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-Use gpstate -s to check the streaming progress.
20190523:14:00:32:034230 gprecoverseg:mpp02:gpadmin-[INFO]:-******************************************************************

修復primary segment 和 mirror segments

gpstate -m 查看greenplum的狀態

gpstop -a -M fast 關閉整個greenplum 集群

以restricted方式啟動數據庫
gpstart -a -R

轉載于:https://www.cnblogs.com/corangeh/p/11206867.html

總結

以上是生活随笔為你收集整理的MPP install的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

中文字幕制服丝袜av久久 | av免费片| 久久久观看 | 国产精品福利无圣光在线一区 | 夜夜高潮夜夜爽国产伦精品 | 性日韩欧美在线视频 | a级国产乱理伦片在线播放 久久久久国产精品一区 | 久久视频网址 | 婷婷综合影院 | 亚洲成人午夜在线 | 久久久国产精品一区二区中文 | 亚洲精品美女免费 | 日本久久电影网 | 92av视频 | 免费观看www小视频的软件 | 亚洲欧洲视频 | 欧美va在线观看 | 国产精在线 | 麻豆91精品 | 四虎在线免费观看 | 国产精品 国产精品 | 国产精品久久久久高潮 | 国产一级视频在线免费观看 | 丁香婷婷久久久综合精品国产 | 最新国产精品久久精品 | 免费h漫在线观看 | 色婷婷综合久久久中文字幕 | 天天干天天干天天干天天干天天干天天干 | 99视频在线看 | 久久综合加勒比 | 国产香蕉97碰碰久久人人 | 久久精品电影网 | 在线视频日韩欧美 | 狠狠操天天操 | 免费毛片一区二区三区久久久 | 国产不卡视频在线 | 婷婷精品国产一区二区三区日韩 | 中文字幕色婷婷在线视频 | 白丝av免费观看 | 亚洲狠狠婷婷综合久久久 | 五月天激情视频在线观看 | 日韩欧美一区二区三区视频 | 中文av在线免费观看 | 久久久伊人网 | 丁香综合 | 黄色毛片大全 | av在线免费播放网站 | 国产精品久久久久婷婷 | 国产精品一区二区中文字幕 | 91传媒在线看 | 免费黄色在线网站 | 国产专区欧美专区 | 亚洲区另类春色综合小说校园片 | 美女视频久久久 | 欧美日韩国产三级 | 99人成在线观看视频 | 国产精品免费小视频 | 成人在线免费观看视视频 | 国产精品porn | 激情视频网页 | 亚洲国产精品小视频 | 亚洲成av人片一区二区梦乃 | 亚洲一区二区黄色 | 在线观看日韩精品视频 | 国产福利精品一区二区 | 69精品久久 | 男女视频国产 | 免费久久久 | 亚洲精品看片 | 日韩av高清 | 久久99国产视频 | 久久在线免费观看视频 | 夜夜夜夜夜夜操 | 免费在线激情电影 | 亚洲涩涩网 | 干狠狠| 国产麻豆精品久久一二三 | 亚洲精品成人在线 | 国产精品免费高清 | 久久婷婷视频 | 日韩美精品视频 | 免费在线观看污 | 久久综合中文色婷婷 | 中文字幕亚洲不卡 | 91久久黄色 | 特级西西www44高清大胆图片 | 成人在线免费小视频 | 久久免费视频网站 | 国产九九九精品视频 | 蜜臀久久99静品久久久久久 | 欧美日韩三级 | 久久久久久久久久久久影院 | 精品国内 | 免费国产在线精品 | 成人免费视频网址 | 亚洲成人av电影在线 | 欧美日韩在线第一页 | 特级黄色视频毛片 | 亚洲国产三级在线 | japanesexxxhd奶水 国产一区二区在线免费观看 | 在线观看黄色av | 日韩大片在线观看 | 麻豆视频国产精品 | a v在线观看 | 99久免费精品视频在线观看 | 国产精品久久久久久久午夜片 | 国产精品 亚洲精品 | aaa黄色毛片 | 日韩欧美在线国产 | 黄色三级免费网址 | 丁香国产视频 | 国产综合在线观看视频 | 在线成人免费 | 99性视频| 天天天天爽| 91av福利视频 | 日韩高清三区 | 久久久久久国产一区二区三区 | 亚洲久久视频 | 美女国产网站 | 69av网| 97视频免费在线观看 | 97精品视频在线播放 | 91精品入口| 国产精品 日韩精品 | 丁香国产视频 | 91香蕉视频720p | 亚洲 欧美变态 另类 综合 | 91看片网址 | 亚洲精品国精品久久99热 | 在线中文字幕av观看 | 99精品免费久久久久久久久日本 | 久久这里只有精品久久 | 麻豆国产露脸在线观看 | 77国产精品 | 亚洲另类视频 | 国产小视频你懂的在线 | 久久久国产精品成人免费 | 久久香蕉国产精品麻豆粉嫩av | 精品一区二区精品 | 日韩av免费在线看 | 国产精品美女视频网站 | 网站在线观看日韩 | 亚洲精品玖玖玖av在线看 | 久人人 | 国产精品无av码在线观看 | 亚洲爽爽网 | 欧美日韩国产一区二区三区在线观看 | www日韩高清| 久久久久久蜜桃一区二区 | 亚洲涩涩涩涩涩涩 | 国产精品免费观看网站 | 免费网站看v片在线a | 亚洲国产精品传媒在线观看 | 日韩视频免费观看高清完整版在线 | 国产一级片免费播放 | 久久久国产精品一区二区三区 | 在线观看视频你懂 | 天天综合网天天 | 亚洲高清av | 天天综合操 | www色网站| 97av精品 | www.伊人色.com | 久久精品成人欧美大片古装 | 国产手机在线视频 | 99热国产在线 | 在线观看你懂的网址 | 精品久久久999 | 99精品国产在热久久 | 亚洲精品黄 | 国产精品女主播一区二区三区 | 欧美精品一区二区三区四区在线 | 成片免费观看视频 | 九九九视频精品 | 色综合www| 久久久久亚洲精品成人网小说 | 综合网av| 九九在线免费视频 | 国产五月色婷婷六月丁香视频 | 麻花天美星空视频 | 国产精品乱码久久久久久1区2区 | 黄色软件网站在线观看 | 爱干视频 | 美女免费视频观看网站 | 99久久激情视频 | 中文国产字幕在线观看 | 亚洲一区二区高潮无套美女 | 成人永久在线 | 国产69久久久欧美一级 | 亚洲激情在线观看 | 日韩欧美在线第一页 | 五月天久久精品 | 成人aaa毛片 | 最近中文国产在线视频 | 香蕉视频在线视频 | 亚洲午夜久久久久久久久电影网 | 国产视频亚洲视频 | 日本在线视频一区二区三区 | 国产打女人屁股调教97 | 久久久久久久久久久久久久av | 九色视频网 | 日韩在线视频一区 | 99精品在线免费观看 | 精品欧美乱码久久久久久 | 日韩三级免费 | 狠狠色伊人亚洲综合成人 | 丁香婷婷社区 | 日韩一区二区三区免费视频 | 日本精品久久久久久 | 欧美极度另类 | 亚洲天天摸日日摸天天欢 | 国产精品尤物视频 | 成人av中文字幕在线观看 | 国产在线色视频 | 欧美在线观看视频一区二区 | 久久国产精品久久久久 | 久久综合给合久久狠狠色 | 久精品一区 | 中文字幕高清免费日韩视频在线 | 日日夜夜网 | 特级a老妇做爰全过程 | 久草成人在线 | 中文字幕在线观看免费高清完整版 | 欧美a级在线免费观看 | 久影院 | 99久久久久国产精品免费 | 欧美日韩视频一区二区 | 五月综合激情 | 亚洲久草视频 | 成年人免费在线 | 久色网 | 久久高清国产 | 91成人午夜 | 久久人91精品久久久久久不卡 | 97超碰总站| 国产白浆视频 | 日韩免费视频播放 | 亚洲视频在线观看网站 | 成年人在线播放视频 | 九九免费在线观看视频 | 亚洲视频免费在线观看 | 超碰在线人人草 | 国产尤物在线视频 | av资源免费观看 | 国产一区二区高清 | 日韩欧美久久 | 麻豆视频免费播放 | 精品专区| 麻豆视频免费在线观看 | 久久久91精品国产一区二区三区 | 免费av观看网站 | 国产黄色理论片 | 99久久久久久 | 韩国一区视频 | 亚洲春色综合另类校园电影 | 久久久久久久免费看 | 久久久久久久99 | 欧美日韩中文国产一区发布 | 91av欧美 | 91丨九色丨高潮 | 欧美大jb| 婷婷99 | 久久av免费 | 少妇高潮流白浆在线观看 | 黄色资源在线观看 | 亚洲电影av在线 | 97福利社 | 91亚洲精品久久久蜜桃 | 中日韩欧美精彩视频 | 免费看搞黄视频网站 | 成人免费色 | 亚洲电影一级黄 | 亚洲精品国偷拍自产在线观看蜜桃 | 日韩电影在线观看一区二区 | 日韩精品2区 | 国产精品粉嫩 | 99久久精| 一本一道久久a久久精品蜜桃 | 97福利 | 国产精品成久久久久 | 国产在线观看一 | 久久亚洲福利视频 | 日韩精品欧美精品 | a天堂最新版中文在线地址 久久99久久精品国产 | 开心激情五月婷婷 | 色偷偷人人澡久久超碰69 | 国产精品美女免费视频 | 黄色小网站在线观看 | 九色精品在线 | 日日夜夜精品视频天天综合网 | 久草视频中文在线 | 又粗又长又大又爽又黄少妇毛片 | 久久久国产一区二区三区 | 日韩精品在线一区 | 久久久av免费 | av丝袜美腿| 久久日本视频 | 成人久久网 | 亚洲综合在线视频 | 一区二区三区四区在线免费观看 | 美女视频又黄又免费 | 日日爽日日操 | 国产精品久久久久国产a级 激情综合中文娱乐网 | 亚洲欧洲精品一区 | 国产成人久久精品一区二区三区 | 亚洲欧美日韩在线一区二区 | 成人黄色小说视频 | 91x色| 日韩影视在线观看 | 美女av免费 | 久久电影国产免费久久电影 | 在线观看网站你懂的 | 中文字幕永久免费 | 成人中文字幕+乱码+中文字幕 | 久久久精品视频成人 | 99这里只有精品99 | 国产精品久久久久一区二区三区共 | 在线国产片 | 中文字幕av全部资源www中文字幕在线观看 | av在线短片 | 欧美一区二区三区在线视频观看 | 国产精品久久久久久久毛片 | 国产小视频你懂的在线 | 久久久久久不卡 | 最近中文字幕视频完整版 | 激情婷婷网 | 一 级 黄 色 片免费看的 | 99在线视频播放 | 精品视频免费在线 | 天天天综合网 | 成人三级视频 | 97碰视频| 狠狠伊人 | 久久精品之 | 国产视频在线观看一区二区 | 亚洲最大激情中文字幕 | 亚洲精品国产麻豆 | 91av在线播放 | 香蕉视频国产在线观看 | 久久国产免 | 久久艹欧美 | 久久国产精品99国产精 | 久久精品欧美一区二区三区麻豆 | 99久久这里只有精品 | 99精品欧美一区二区蜜桃免费 | 玖玖在线免费视频 | 日韩成人精品一区二区 | 91一区二区在线 | 国产精品欧美在线 | 一区二区三区视频网站 | 亚洲永久精品在线观看 | 日本91在线| 国产精品网红直播 | 欧美一级黄色视屏 | 99热这里只有精品免费 | av片子在线观看 | 麻豆免费视频网站 | 久久一视频 | 欧美乱淫视频 | 免费看片网址 | 日韩欧美视频在线 | 国产婷婷vvvv激情久 | 欧美日本不卡 | 一区二区三区四区五区在线 | 成年人免费看片网站 | 人人爽久久涩噜噜噜网站 | 久久狠狠干 | 国产涩涩在线观看 | 九九九在线观看 | 一级一片免费看 | 黄视频网站大全 | 色的网站在线观看 | 超碰97中文 | 福利视频| 成年人免费看片网站 | 91欧美国产 | 久久精品国产一区二区电影 | 99精品色 | 日日摸日日爽 | 中文字幕日韩一区二区三区不卡 | 精品久久久久久久久中文字幕 | 日韩av片无码一区二区不卡电影 | 在线国产视频 | 久久精品国产亚洲精品 | www.国产在线观看 | 日韩激情视频在线观看 | 中文字幕乱码日本亚洲一区二区 | 在线黄色毛片 | 欧美福利视频一区 | 玖玖爱在线观看 | 色婷婷福利 | 丁香六月久久综合狠狠色 | 免费碰碰 | 日韩av高清 | 二区视频在线 | 亚洲精品av中文字幕在线在线 | 精品久久一级片 | 久久久久国产精品一区 | 久久网页| 色播六月天| 国产福利91精品一区 | 久草久热 | 欧美日韩在线看 | 国产黄色片免费看 | 国产精品高| 菠萝菠萝在线精品视频 | 国产精品久久久久久久久久了 | 欧美激情精品久久久久久免费印度 | 蜜桃av人人夜夜澡人人爽 | 黄色国产高清 | 精品视频资源站 | 精品久久久久国产免费第一页 | 91高清免费 | 日本在线视频网址 | av丝袜制服 | 国产精品日韩高清 | 亚洲精品小视频在线观看 | 在线免费观看黄 | 久久久电影网站 | 国内精品视频在线 | 少妇精69xxtheporn | 日本色小说视频 | 热热热热热色 | 亚洲精选99 | 一区二区三区四区精品 | 97在线成人| 人人插人人 | 国产999| 欧美成人理伦片 | 一区二区三区在线观看 | 国产精品igao视频网入口 | 特级西西444www大胆高清无视频 | 国产啊v在线 | 欧美日韩一级久久久久久免费看 | 亚洲精品在线观 | 狠狠狠干| 免费视频91蜜桃 | 在线观看色网 | 夜夜高潮夜夜爽国产伦精品 | 久久综合欧美精品亚洲一区 | 99精品在线免费 | 在线免费观看一区二区三区 | 色欧美日韩| 黄a在线看 | 美腿丝袜av| 日韩一级电影网站 | 国产视频在线观看免费 | 亚洲欧美日韩不卡 | 综合在线色 | 99精品国产免费久久久久久下载 | 免费看特级毛片 | 免费看黄在线 | 婷婷久久网| 国产精品久久久久久久免费大片 | 中文字幕在线免费观看视频 | 黄色av免费在线 | 国产xx在线| 玖玖视频免费在线 | 欧美性生活免费看 | 91九色在线观看视频 | 亚洲欧美日本一区二区三区 | 国产精品 国内视频 | 国产视频在线看 | 欧美日韩高清一区二区 国产亚洲免费看 | 五月天亚洲婷婷 | 成人黄色片免费 | 国产97视频 | 91视频亚洲 | 永久免费视频国产 | 免费在线日韩 | av大片网址 | 美女av免费看 | 欧美日韩性 | 2023国产精品自产拍在线观看 | 国产在线精品一区二区不卡了 | 中文字幕在线观看av | 国内视频在线观看 | 最近能播放的中文字幕 | 成年人国产在线观看 | 国内精品久久久久久久97牛牛 | 99精品99| 夜夜高潮夜夜爽国产伦精品 | 国产高清在线一区 | 国产v欧美 | 日韩一三区 | 成人蜜桃| 欧美激情视频三区 | 又湿又紧又大又爽a视频国产 | 嫩草91影院| 人人要人人澡人人爽人人dvd | 色综合天天做天天爱 | 成人在线观看免费 | 午夜视频在线观看一区二区三区 | 97超碰在线人人 | 天天操天天操天天操天天操天天操 | 综合国产在线 | 亚洲日本激情 | 成年人黄色大片在线 | 可以免费观看的av片 | 91九色porny蝌蚪主页 | 国内精品亚洲 | 久久国产精品视频免费看 | 国产在线资源 | 国产精品日韩在线播放 | 亚洲五月婷 | 在线一区观看 | 人人cao| 久久男人中文字幕资源站 | 黄色精品免费 | 精品在线亚洲视频 | 奇米四色影狠狠爱7777 | free. 性欧美.com| 亚洲欧洲精品一区二区精品久久久 | 在线视频18在线视频4k | 麻豆一区在线观看 | 国产在线更新 | 色a在线观看 | 99九九99九九九视频精品 | 国产视频久 | 91大神电影 | 婷婷狠狠操 | 综合中文字幕 | 成年人电影免费在线观看 | 欧美日韩免费一区二区三区 | 三级性生活视频 | 日韩免费不卡av | 国产精品一区二区三区在线播放 | 免费av片在线 | 成人免费观看视频网站 | 国产手机av在线 | 国产涩涩网站 | 香蕉视频色 | 99久久久久免费精品国产 | 中文字幕色综合网 | 精品在线观看一区二区 | 久艹在线播放 | 日日夜夜精品网站 | 99精品系列 | 亚洲视频www | 国产成人无码AⅤ片在线观 日韩av不卡在线 | 精品91| 亚洲精品久久久久中文字幕m男 | 国产玖玖在线 | 99精品热 | 日韩免费b | 探花视频在线观看+在线播放 | 高清视频一区 | 免费看的黄网站 | 久久久久国产精品免费网站 | 日韩精品中文字幕av | 黄色免费网站 | 欧美污在线观看 | 国产精品久久久久久久久久新婚 | 91视频三区| 成人免费视频在线观看 | www欧美xxxx | 91黄色视屏 | 色网站在线免费观看 | 国产精品va最新国产精品视频 | 亚洲激情久久 | 97在线免费观看视频 | 欧美日韩免费网站 | 夜夜躁狠狠躁日日躁 | 99久久国产免费免费 | www.天天射.com | 国产视频精品在线 | 国产女做a爱免费视频 | 日韩免费小视频 | 天天草av | 探花视频免费在线观看 | 国产美女在线精品免费观看 | 精品欧美一区二区三区久久久 | 成人一区二区在线观看 | 久久国产精品视频观看 | 黄污视频网站大全 | 久艹视频在线观看 | 国内精品二区 | 蜜桃传媒一区二区 | 欧美xxxxx在线视频 | 国产区av在线 | 国产主播大尺度精品福利免费 | 九九热免费视频在线观看 | 久久伦理 | 日本黄色免费看 | 日韩久久精品一区二区 | 99在线免费观看 | 国产97色在线 | 91精品视频观看 | 亚洲精品在线免费播放 | 免费在线电影网址大全 | 天天干夜夜夜操天 | 91人人澡人人爽 | 精品国产视频在线 | 中文字幕一区二区三区视频 | 九九免费在线观看视频 | 三级黄色欧美 | 亚洲天堂网在线观看视频 | 天天操天天操 | 超碰精品在线观看 | 香蕉视频免费在线播放 | 激情久久综合网 | 丁香午夜| av在线免费在线观看 | 天天射天天色天天干 | 精品成人网 | 小草av在线播放 | 不卡电影一区二区三区 | 久久久91精品国产一区二区精品 | 91超在线| 国产精品久久久久永久免费看 | 国语对白少妇爽91 | 丁香午夜 | 999久久国精品免费观看网站 | 中文字幕av一区二区三区四区 | 亚洲欧美经典 | 欧美午夜一区二区福利视频 | 黄色av成人在线观看 | 中文av不卡 | 国产精品一区在线观看 | 国产一级视屏 | 在线观看涩涩 | 色综合久久精品 | 99精品视频精品精品视频 | 夜夜婷婷 | www.97视频| 国产黄色免费电影 | 91亚洲精品久久久中文字幕 | 九草在线观看 | 国产色婷婷精品综合在线手机播放 | 91九色网址 | 亚洲精品国偷自产在线91正片 | 91视频网址入口 | 96国产精品视频 | 久久综合九九 | 国产黄色精品视频 | 久久久久久97三级 | 在线免费精品视频 | 97在线免费视频观看 | 国产精品成人在线 | 天天爽天天爽 | 中文字幕在线观看视频网站 | 福利视频一区二区 | 探花视频在线版播放免费观看 | 亚洲人视频在线 | 香蕉免费在线 | 久久不射电影网 | 亚洲激情视频在线观看 | 成人一级电影在线观看 | 久久经典视频 | 黄色软件在线观看免费 | 免费成人在线电影 | 婷婷在线网 | 免费看v片 | 天天干天天干天天 | 国产偷国产偷亚洲清高 | 973理论片235影院9 | 国产精品 久久 | 男女激情片在线观看 | 超碰人人草 | 久久久久久久久久久黄色 | 黄色大片免费网站 | 黄色毛片大全 | 亚洲日本韩国一区二区 | 欧美三级高清 | 日韩剧情 | 天天拍天天爽 | 国产日韩欧美在线免费观看 | 91久久精品一区二区二区 | 欧美日韩精品在线观看视频 | 成人在线视频你懂的 | 国产一区成人在线 | 国产精品 美女 | 91亚洲国产 | 国产精品久久久久久久久免费 | 亚洲午夜久久久久久久久电影网 | 日本精品一区二区三区在线观看 | 国产一级免费观看 | 中文av网站 | 91中文字幕永久在线 | 久久久久久久久久久久99 | 亚洲女欲精品久久久久久久18 | 日韩av免费一区 | 免费看国产a | 亚洲成人精品影院 | 久久久国产一区 | 91九色国产在线 | 天天射天天干天天操 | 麻豆视频国产精品 | 欧美日性视频 | 免费视频一区 | 91原创在线观看 | 国产精品欧美久久久久三级 | 亚洲最新在线 | 天天干天天草天天爽 | 激情欧美丁香 | 亚洲婷婷伊人 | 亚洲综合在线五月 | 91桃花视频 | 日本在线中文在线 | 成片视频在线观看 | 免费 在线 中文 日本 | 欧美在线视频不卡 | 精品在线一区二区三区 | 国产一区二区网址 | 亚洲激情在线 | 韩国av免费 | 国产黄色片免费 | 午夜 免费 | 91精品国产九九九久久久亚洲 | 热re99久久精品国产66热 | 日日碰狠狠添天天爽超碰97久久 | a级成人毛片 | 国产二区电影 | 六月色丁 | 婷婷丁香花五月天 | 蜜桃视频在线观看一区 | 亚洲一区久久久 | 精品欧美乱码久久久久久 | 亚洲女在线 | 91完整视频| 国产精品日韩欧美 | 成人免费一区二区三区在线观看 | 国产视频一区精品 | 国产成人av电影 | 激情婷婷综合网 | 国产美女精品久久久 | 亚洲一区日韩 | 精品国产伦一区二区三区免费 | 国产成人精品一区二区在线观看 | 美女久久久久久久久久 | 久草免费在线观看 | 69精品久久 | 久久久国产99久久国产一 | 91视频在线免费观看 | 国产精品美女视频网站 | 欧美一级片在线播放 | 在线视频你懂 | 国产精品久久久久久久久免费看 | 超碰午夜 | 亚洲禁18久人片 | www.97视频 | 国产手机视频精品 | 色香蕉在线视频 | 成人91av| 亚洲国内精品在线 | 香蕉视频在线观看免费 | 99久久精品免费看国产一区二区三区 | 国产99中文字幕 | 美女久久久久久久 | 曰韩精品 | 精品一区二三区 | 久草免费色站 | 97精品一区二区三区 | 91免费黄视频 | 欧美在线观看视频免费 | 精品亚洲国产视频 | 欧美精品亚洲二区 | 中文字幕区 | 亚洲欧洲一区二区在线观看 | 99精品视频精品精品视频 | 精品一区 精品二区 | 精品国产亚洲在线 | 国产成人精品亚洲a | 午夜精品久久久久久久久久 | 亚洲在线资源 | 亚洲成人免费 | 狠狠狠狠狠狠 | 激情综合啪 | 天堂av色婷婷一区二区三区 | 91手机视频| 视频一区二区三区视频 | 久久久久国产免费免费 | 日韩美精品视频 | 香蕉蜜桃视频 | 国产精品久久久久国产a级 激情综合中文娱乐网 | 五月综合久久 | 又黄又爽又刺激的视频 | 97视频在线免费播放 | 麻豆影视在线播放 | 97免费视频在线 | 最新日本中文字幕 | 午夜视频播放 | 久操操| 色多视频在线观看 | 国产在线精品视频 | 99色在线观看 | 黄色毛片一级片 | 99夜色| 久久国产精品一区二区 | 天天插日日插 | 小草av在线播放 | 久久草在线免费 | 久久国产高清视频 | 久久中文视频 | 国产成人av | 国产1区在线 | www.国产在线 | 久久综合久久八八 | 国产日韩欧美在线播放 | 欧美在线视频一区二区三区 | 波多野结衣在线视频一区 | 人人天天夜夜 | 亚洲一级影院 | 99视频99 | 午夜影院先 | 日本久久久久久久久久久 | 综合在线观看色 | 一区二区三区在线看 | www.久久com | 五月天综合激情网 | 最新色站 | 亚州av一区| 色在线最新 | 亚洲综合精品视频 | 欧美久久久 | 国产精久久久久久妇女av | 五月婷婷综合激情 | 久久公开视频 | 日本不卡一区二区三区在线观看 | 国产99久久久国产精品成人免费 | 天天射天天射 | 99视频免费观看 | 免费一级日韩欧美性大片 | 亚洲精品国精品久久99热一 | 精品国产一二三四区 | 国产91免费看 | 国产高清黄 | 92精品国产成人观看免费 | 99久久精品免费看国产一区二区三区 | 香蕉视频在线免费 | 欧美韩国日本在线 | 欧美性大战久久久久 | 国产精品99爱 | 久久av免费观看 | 天天操天天操天天操天天操天天操天天操 | www色网站| www.狠狠色 | 久久久久久久久久久久亚洲 | 香蕉视频网站在线观看 | av免费在线网站 | av理论电影 | av成年人电影 | 精品在线视频观看 | 在线看的毛片 | 在线播放 亚洲 | 日韩二区三区 | 三级黄色片在线观看 | 久久免费视频观看 | 国产精品久久久久国产精品日日 | 婷五月激情 | 欧美疯狂性受xxxxx另类 | 狠狠躁夜夜躁人人爽超碰91 | 探花视频在线版播放免费观看 | 在线观看播放av | 波多野结衣电影一区二区三区 | 又黄又爽又色无遮挡免费 | 欧美激情视频在线免费观看 | 国语自产偷拍精品视频偷 | 婷婷午夜 | 日韩1页| 欧美极品少妇xxxx | 亚洲成人av在线播放 | 久草在线 | 亚洲精品视频在线看 | 欧美日韩国产精品一区二区 | 欧美天堂久久 | 蜜臀av性久久久久蜜臀aⅴ四虎 | 日本三级在线观看中文字 | 99色人| 久草久草久草久草 | 国产一区观看 | 中文字幕在线网 | 久草在线视频在线观看 | 久久免费视频播放 | 精品在线视频观看 | 日韩伦理片一区二区三区 | 天天操综合网站 | 成人国产精品 | 一本一本久久a久久精品综合 | 亚洲精品www久久久久久 | 久草综合在线观看 | 国产九色91 | 成人黄色在线 | 久久人人爽人人人人片 | 日本电影久久 | 日韩视频图片 | 日韩精品一区二区三区在线视频 | 午夜91视频 | 久久麻豆视频 | 国产伦精品一区二区三区高清 | 欧美日韩国产网站 | 国产成人三级一区二区在线观看一 | 91大神免费在线观看 | 欧亚日韩精品一区二区在线 | 色婷婷久久久 | 99视频在线观看一区三区 | 久久久久久久久久电影 | 欧美一区二区精美视频 | 亚洲专区中文字幕 | 超碰免费久久 | av手机在线播放 | 69夜色精品国产69乱 | 亚洲精品tv久久久久久久久久 | 欧洲视频一区 | 国产精品永久免费视频 | 亚洲成aⅴ人片久久青草影院 | 在线观看一级视频 | 久久久官网| 国产一区二区久久久久 | 久久综合中文字幕 | 婷婷在线免费观看 | 久久人人看 | 夜夜爽www | 国产精品一区二区62 | 久久99国产一区二区三区 | 国产精品成| 视频在线观看日韩 | 国产黄色在线 | 午夜精品视频免费在线观看 | 热re99久久精品国产99热 | 五月天,com | 九九免费在线观看视频 | 97电影院在线观看 | 成人一级电影在线观看 | 欧美性做爰猛烈叫床潮 | 人人干人人上 | 91黄视频在线观看 | 免费亚洲视频 | 欧美日韩免费视频 | 91免费在线视频 | 国产精品 日韩 欧美 | 福利网在线| 人人爽网站| 免费看片成人 | 欧美极品少妇xxxxⅹ欧美极品少妇xxxx亚洲精品 | 91av原创 | 欧美一区二区三区特黄 | 成人电影毛片 | 亚洲一级电影在线观看 | av电影免费在线看 | 久久综合综合久久综合 | 久久免费视频7 | 人人插人人插 | 国产 欧美 日产久久 | 国产精品九九久久久久久久 | 91麻豆操 | 亚洲精品一区二区久 | 又色又爽又黄 | 亚洲综合视频在线观看 | 97精品国产91久久久久久 | 国产99久久精品一区二区300 | 亚洲精品综合一二三区在线观看 | 激情在线免费视频 | 亚州成人av在线 | 国产精品对白一区二区三区 | 一级理论片在线观看 | zzijzzij亚洲日本少妇熟睡 | 久爱精品在线 | 亚洲黄色免费在线看 | 亚洲成a人片在线观看网站口工 | 在线观看视频你懂得 | 视频国产区 | 久久刺激视频 | 色偷偷88888欧美精品久久 | 成年人在线免费看片 | 久久激情视频 久久 | 久久精品中文 | 亚洲精品中文字幕视频 | 99精品欧美一区二区 | 91成年人网站 | 日本三级久久久 | 波多野结衣在线观看一区二区三区 | 天天插日日射 | 日本韩国欧美在线观看 | 91麻豆看国产在线紧急地址 | 亚洲精品网站 | 美女精品久久久 | 欧美亚洲另类在线视频 | 亚洲国产合集 | 国产一级大片免费看 | 操操操干干干 | 天天射天天 | 久久免费看a级毛毛片 | 久久久麻豆视频 | 日日日日 | 蜜臀aⅴ精品一区二区三区 久久视屏网 | 亚洲一区二区视频在线播放 | 西西www444 | 日韩电影在线观看一区 | 特级a老妇做爰全过程 | 成人在线免费观看视视频 | www.夜夜操.com| 午夜精品电影一区二区在线 | 91成人在线看 | 欧美特一级片 | 毛片视频网址 | 久章草在线 |