????????redis 分布式集群可分為主從集群、哨兵集群、分片集群，本片文章我們就來分別介紹這三種集群環(huán)境的搭建。

????????本次搭建環(huán)境為 Linux 虛擬機(jī)系統(tǒng)。

????????在搭建 redis集群之前，需要先在 linux 系統(tǒng)中安裝部署單機(jī)的 redis（安裝目錄為： /usr/local/src ），其詳細(xì)步驟可點(diǎn)擊如下鏈接：Linux云服務(wù)器安裝部署redis詳細(xì)步驟

Ⅰ. redis 主從集群搭建

1.1 集群結(jié)構(gòu)?

我們搭建的主從集群結(jié)構(gòu)如圖：

共包含三個(gè)節(jié)點(diǎn)，一個(gè)主節(jié)點(diǎn)，兩個(gè)從節(jié)點(diǎn)（主節(jié)點(diǎn)用于寫操作，從節(jié)點(diǎn)只能進(jìn)行讀操作）。

這里我們會(huì)在同一臺(tái)虛擬機(jī)中開啟 3 個(gè) redis 實(shí)例，模擬主從集群，信息如下：

IPPORT角色

192.168.70.130	7001	master
192.168.70.130	7002	slave
192.168.70.130	7003	slave

1.2 準(zhǔn)備實(shí)例并配置

要在同一臺(tái)虛擬機(jī)開啟 3 個(gè)實(shí)例，必須準(zhǔn)備三份不同的配置文件和目錄，配置文件所在目錄也就是工作目錄。

1）創(chuàng)建目錄

我們創(chuàng)建三個(gè)文件夾，名字分別叫 7001、7002、7003：

# 進(jìn)入 /usr/local/src 目錄 cd /usr/local/src # 創(chuàng)建目錄 mkdir 7001 7002 7003

如圖：

2）開啟 RDB，關(guān)閉 AOF（默認(rèn)就是）

修改 redis-6.2.4/redis.conf 文件，將其中的持久化模式改為默認(rèn)的 RDB 模式，AOF 保持關(guān)閉狀態(tài)

# 開啟RDB # save "" save 3600 1 save 300 100 save 60 10000# 關(guān)閉AOF appendonly no

3）拷貝配置文件到每個(gè)實(shí)例目錄

# 方式一：逐個(gè)拷貝 cp redis-6.2.4/redis.conf 7001 cp redis-6.2.4/redis.conf 7002 cp redis-6.2.4/redis.conf 7003# 方式二：管道組合命令，一鍵拷貝 echo 7001 7002 7003 | xargs -t -n 1 cp redis-6.2.4/redis.conf

4）修改每個(gè)實(shí)例的端口、工作目錄

修改每個(gè)文件夾內(nèi)的配置文件，將端口分別修改為 7001、7002、7003，將 rdb 文件保存位置都修改為自己所在目錄（在 /usr/local/src 目錄執(zhí)行下列命令）：

sed -i -e 's/6379/7001/g' -e 's/dir .\//dir \/usr\/local\/src\/7001\//g' 7001/redis.conf sed -i -e 's/6379/7002/g' -e 's/dir .\//dir \/usr\/local\/src\/7002\//g' 7002/redis.conf sed -i -e 's/6379/7003/g' -e 's/dir .\//dir \/usr\/local\/src\/7003\//g' 7003/redis.conf

5）修改每個(gè)實(shí)例的聲明IP

虛擬機(jī)本身有多個(gè) IP，為了避免將來混亂，我們需要在 redis.conf 文件中指定每一個(gè)實(shí)例的綁定 ip 信息，格式如下：

# redis實(shí)例的聲明 IP replica-announce-ip 192.168.150.101

每個(gè)目錄都要改，我們一鍵完成修改（在? /usr/local/src 目錄執(zhí)行下列命令）：

# 逐一執(zhí)行 sed -i '1a replica-announce-ip 192.168.70.130' 7001/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7002/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7003/redis.conf# 或者一鍵修改 printf '%s\n' 7001 7002 7003 | xargs -I{} -t sed -i '1a replica-announce-ip 192.168.70.130' {}/redis.conf

如果主從都開啟了密碼 requirepass，導(dǎo)致不能驗(yàn)證成功，在 redis 從服務(wù)器的配置文件（redis.conf）里面添加 masterauth 123321 即可（在 /usr/local/src?目錄執(zhí)行下列命令）：

# 逐一執(zhí)行 sed -i 'masterauth 123321' 7002/redis.conf sed -i 'masterauth 123321' 7003/redis.conf# 或者意見修改 printf '%s\n' 7002 7003 | xargs -I{} -t sed -i 'masterauth 123321' {}/redis.conf

(123321 是我的主 redis 的密碼，此參數(shù)是當(dāng)與主連接時(shí)的密碼驗(yàn)證)

1.3 啟動(dòng)

為了方便查看日志，我們可以打開 3 個(gè) ssh 窗口，分別啟動(dòng) 3 個(gè) redis 實(shí)例，啟動(dòng)命令（在 /usr/local/src?目錄執(zhí)行下列命令）： ?

# 第1個(gè) redis-server 7001/redis.conf # 第2個(gè) redis-server 7002/redis.conf # 第3個(gè) redis-server 7003/redis.conf

如果要一鍵停止，可以運(yùn)行下面命令：

printf '%s\n' 7001 7002 7003 | xargs -I{} -t redis-cli -p {} shutdown

1.4 開啟主從關(guān)系

現(xiàn)在三個(gè)實(shí)例還沒有任何關(guān)系，要配置主從可以使用 replicaof 或者 slaveof（5.0以前）命令。

有臨時(shí)和永久兩種模式：

• 修改配置文件（永久生效）

  • 在 redis.conf 中添加一行配置：slaveof <masterip> <masterport>

• 使用 redis-cli 客戶端連接到 redis 服務(wù)，執(zhí)行 slaveof 命令（重啟后失效）：slaveof <masterip> <masterport>

注意：在5.0以后新增命令 replicaof，與 salveof 效果一致。

這里我們使用方式二進(jìn)行演示 ：

1）通過redis-cli命令連接7002，執(zhí)行下面命令：

# 連接 7002 redis-cli -p 7002 # 執(zhí)行slaveof slaveof 192.168.150.101 7001

2）通過redis-cli命令連接7003，執(zhí)行下面命令： ?

# 連接 7003 redis-cli -p 7003 # 執(zhí)行slaveof slaveof 192.168.150.101 7001

3）然后連接 7001節(jié)點(diǎn)，查看集群狀態(tài)：

# 連接 7001 redis-cli -p 7001 # 查看狀態(tài) info replication

結(jié)果：

1.5 測(cè)試

執(zhí)行下列操作以測(cè)試：

• 利用redis-cli連接7001，執(zhí)行set num 123

• 利用redis-cli連接7002，執(zhí)行g(shù)et num，再執(zhí)行set num 666

• 利用redis-cli連接7003，執(zhí)行g(shù)et num，再執(zhí)行set num 888

可以發(fā)現(xiàn)，只有在7001這個(gè)master節(jié)點(diǎn)上可以執(zhí)行寫操作，7002和7003這兩個(gè)slave節(jié)點(diǎn)只能執(zhí)行讀操作。

Ⅱ. redis 哨兵集群搭建

2.1 集群結(jié)構(gòu)

這里我們搭建一個(gè)三節(jié)點(diǎn)形成的 Sentinel 集群，來監(jiān)管之前的 Redis 主從集群。如圖： ?

?

三個(gè) sentinel 實(shí)例信息如下：

節(jié)點(diǎn)IPPORT

s1	192.168.70.130	27001
s2	192.168.70.130	27002
s3	192.168.70.130	27003

2.2 準(zhǔn)備實(shí)例并配置

要在同一臺(tái)虛擬機(jī)開啟 3 個(gè)實(shí)例，必須準(zhǔn)備三份不同的配置文件和目錄，配置文件所在目錄也就是工作目錄。

我們創(chuàng)建三個(gè)文件夾，名字分別叫s1、s2、s3：

# 進(jìn)入/usr/local/src目錄 cd /usr/local/src # 創(chuàng)建目錄 mkdir s1 s2 s3

如圖：

然后我們?cè)?s1 目錄下創(chuàng)建一個(gè) sentinel.conf 文件，添加下面的內(nèi)容：

port 27001 sentinel announce-ip 192.168.70.130 sentinel monitor mymaster 192.168.70.130 7001 2 sentinel down-after-milliseconds mymaster 5000 sentinel failover-timeout mymaster 60000 dir "/usr/local/src/s1"

解釋：

• port 27001：是當(dāng)前 sentinel 實(shí)例的端口

• sentinel monitor mymaster 192.168.70.130?7001 2：指定主節(jié)點(diǎn)信息

  • mymaster：主節(jié)點(diǎn)名稱，自定義，任意寫

  • 192.168.70.130 7001：主節(jié)點(diǎn)的ip和端口

  • 2：選舉 master 時(shí)的 quorum 值（即超過 2 個(gè)哨兵認(rèn)為此節(jié)點(diǎn)主觀下線，就認(rèn)為此節(jié)點(diǎn)客觀下線）

然后將 s1/sentinel.conf 文件拷貝到 s2、s3 兩個(gè)目錄中（在 /usr/local/src?目錄執(zhí)行下列命令）：

# 方式一：逐個(gè)拷貝 cp s1/sentinel.conf s2 cp s1/sentinel.conf s3 # 方式二：管道組合命令，一鍵拷貝 echo s2 s3 | xargs -t -n 1 cp s1/sentinel.conf

修改 s2、s3 兩個(gè)文件夾內(nèi)的配置文件，將端口分別修改為 27002、27003（在 /usr/local/src?目錄執(zhí)行下列命令）：

sed -i -e 's/27001/27002/g' -e 's/s1/s2/g' s2/sentinel.conf sed -i -e 's/27001/27003/g' -e 's/s1/s3/g' s3/sentinel.conf

2.3 啟動(dòng)

為了方便查看日志，我們可以打開3個(gè) ssh 窗口，分別啟動(dòng) 3 個(gè) redis實(shí)例，啟動(dòng)命令（在 /usr/local/src?目錄執(zhí)行下列命令）： ?

# 第1個(gè) redis-sentinel s1/sentinel.conf # 第2個(gè) redis-sentinel s2/sentinel.conf # 第3個(gè) redis-sentinel s3/sentinel.conf

2.4 測(cè)試

嘗試讓 master 節(jié)點(diǎn) 7001 宕機(jī)，查看 sentinel 日志： ?

查看7003的日志：

查看7002的日志：

2.5 redisTemplate（選）

在 Sentinel 集群監(jiān)管下的 Redis 主從集群，其節(jié)點(diǎn)會(huì)因?yàn)樽詣?dòng)故障轉(zhuǎn)移而發(fā)生變化，Redis 的客戶端必須感知這種變化，及時(shí)更新連接信息。Spring的RedisTemplate 底層利用 lettuce 實(shí)現(xiàn)了節(jié)點(diǎn)的感知和自動(dòng)切換。

下面，我們通過一個(gè)測(cè)試來實(shí)現(xiàn) RedisTemplate 集成哨兵機(jī)制。

1）在項(xiàng)目的pom文件中引入依賴：

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId> </dependency>

2）然后在配置文件 application.yml 中指定 redis 的 sentinel 相關(guān)信息：

spring:redis:sentinel:master: mymasternodes:- 192.168.70.130:27001- 192.168.70.130:27002- 192.168.70.130:27003

3）在項(xiàng)目的啟動(dòng)類中，添加一個(gè)新的bean，配置讀寫分離：

@Bean public LettuceClientConfigurationBuilderCustomizer clientConfigurationBuilderCustomizer(){return clientConfigurationBuilder -> clientConfigurationBuilder.readFrom(ReadFrom.REPLICA_PREFERRED); }

這個(gè)bean中配置的就是讀寫策略，包括四種：

• MASTER：從主節(jié)點(diǎn)讀取

• MASTER_PREFERRED：優(yōu)先從master節(jié)點(diǎn)讀取，master不可用才讀取replica

• REPLICA：從slave（replica）節(jié)點(diǎn)讀取

• REPLICA _PREFERRED：優(yōu)先從slave（replica）節(jié)點(diǎn)讀取，所有的slave都不可用才讀取master

Ⅲ. redis 分片集群搭建?

3.1 集群結(jié)構(gòu)

這里我們會(huì)在同一臺(tái)虛擬機(jī)中開啟 6 個(gè) redis 實(shí)例，模擬分片集群，信息如下：

IPPORT角色

192.168.70.130	7001	master
192.168.70.130	7002	master
192.168.70.130	7003	master
192.168.70.130	8001	slave
192.168.70.130	8002	slave
192.168.70.130	8003	slave

3.2 準(zhǔn)備實(shí)例并配置

創(chuàng)建?7001、7002、7003、8001、8002、8003 目錄（已經(jīng)存在相同結(jié)點(diǎn)的記得刪除之前的 7001、7002、7003 目錄）：

# 進(jìn)入/usr/local/src目錄 cd /usr/local/src # 刪除舊的，避免配置干擾 rm -rf 7001 7002 7003 # 創(chuàng)建目錄 mkdir 7001 7002 7003 8001 8002 8003

在 /usr/local/src 下準(zhǔn)備一個(gè)新的 redis.conf 文件，內(nèi)容如下：

port 6379 # 開啟集群功能 cluster-enabled yes # 集群的配置文件名稱，不需要我們創(chuàng)建，由redis自己維護(hù) cluster-config-file /usr/local/src/6379/nodes.conf # 節(jié)點(diǎn)心跳失敗的超時(shí)時(shí)間 cluster-node-timeout 5000 # 持久化文件存放目錄 dir /usr/local/src/6379 # 綁定地址 bind 0.0.0.0 # 讓redis后臺(tái)運(yùn)行 daemonize yes # 注冊(cè)的實(shí)例ip replica-announce-ip 192.168.70.130 # 保護(hù)模式 protected-mode no # 數(shù)據(jù)庫數(shù)量 databases 1 # 日志 logfile /usr/local/src/6379/run.log

將這個(gè)文件拷貝到 7001、7002、7003、8001、8002、8003 目錄下（在 /usr/local/src?目錄執(zhí)行下列命令）:

# 執(zhí)行拷貝 echo 7001 7002 7003 8001 8002 8003 | xargs -t -n 1 cp redis.conf

修改每個(gè)目錄下的 redis.conf，將其中的 6379 修改為與所在目錄一致（在 /usr/local/src?目錄執(zhí)行下列命令）：

# 修改配置文件 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t sed -i 's/6379/{}/g' {}/redis.conf

3.3 啟動(dòng)

?因?yàn)橐呀?jīng)配置了后臺(tái)啟動(dòng)模式，所以可以直接啟動(dòng)服務(wù)（在 /usr/local/src?目錄執(zhí)行下列命令）：

# 一鍵啟動(dòng)所有服務(wù) printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-server {}/redis.conf

通過 ps 查看狀態(tài)：

ps -ef | grep redis

發(fā)現(xiàn)服務(wù)都已經(jīng)正常啟動(dòng)：

如果要關(guān)閉所有進(jìn)程，可以執(zhí)行命令：

ps -ef | grep redis | awk '{print $2}' | xargs kill # 或者 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-cli -p {} shutdown # 推薦

3.4 創(chuàng)建集群

雖然服務(wù)啟動(dòng)了，但是目前每個(gè)服務(wù)之間都是獨(dú)立的，沒有任何關(guān)聯(lián)。

我們需要執(zhí)行命令來創(chuàng)建集群，在 Redis5.0 之前創(chuàng)建集群比較麻煩，5.0 之后集群管理命令都集成到了 redis-cli 中。

1）Redis5.0 之前

Redis5.0 之前集群命令都是用 redis 安裝包下的 src/redis-trib.rb 來實(shí)現(xiàn)的。因?yàn)?redis-trib.rb 是有 ruby 語言編寫的所以需要安裝 ruby 環(huán)境。 ?

# 安裝依賴yum -y install zlib ruby rubygemsgem install redis

然后通過命令來管理集群：

# 進(jìn)入redis的src目錄 cd /usr/local/src/redis-6.2.4/src # 創(chuàng)建集群 ./redis-trib.rb create --replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

2）Redis5.0 以后

我們使用的是 Redis6.2.4 版本，集群管理以及集成到了 redis-cli 中，格式如下：

redis-cli --cluster create --cluster-replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

命令說明：

• redis-cli --cluster?或者?./redis-trib.rb：代表集群操作命令

• create：代表是創(chuàng)建集群

• --replicas 1?或者?--cluster-replicas 1 ：指定集群中每個(gè) master 的副本個(gè)數(shù)為 1，此時(shí)節(jié)點(diǎn)總數(shù) ÷ (replicas + 1)? 得到的就是 master 的數(shù)量。因此節(jié)點(diǎn)列表中的前 n 個(gè)就是master，其它節(jié)點(diǎn)都是 slave 節(jié)點(diǎn)，隨機(jī)分配到不同 master

運(yùn)行后的樣子：

這里輸入yes，則集群開始創(chuàng)建：

通過命令可以查看集群狀態(tài)：

redis-cli -p 7001 cluster nodes

3.5 測(cè)試

嘗試連接 7001 節(jié)點(diǎn)，存儲(chǔ)一個(gè)數(shù)據(jù)：

# 連接 redis-cli -c -p 7001 # 存儲(chǔ)數(shù)據(jù) set num 123 # 讀取數(shù)據(jù) get num # 再次存儲(chǔ) set a 1

注意：連接時(shí)要加上參數(shù) -c，否則操作時(shí)就會(huì)失敗

總結(jié)

以上是生活随笔為你收集整理的redis分布式集群环境搭建的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。