日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

redis分布式集群环境搭建

發布時間:2024/5/15 编程问答 96 豆豆
生活随笔 收集整理的這篇文章主要介紹了 redis分布式集群环境搭建 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

????????redis 分布式集群可分為主從集群哨兵集群分片集群,本片文章我們就來分別介紹這三種集群環境的搭建。

????????本次搭建環境為 Linux 虛擬機系統。

????????在搭建 redis集群之前,需要先在 linux 系統中安裝部署單機的 redis(安裝目錄為: /usr/local/src ),其詳細步驟可點擊如下鏈接:Linux云服務器安裝部署redis詳細步驟

Ⅰ. redis 主從集群搭建

1.1 集群結構?

我們搭建的主從集群結構如圖:

共包含三個節點,一個主節點,兩個從節點(主節點用于寫操作,從節點只能進行讀操作)。

這里我們會在同一臺虛擬機中開啟 3 個 redis 實例,模擬主從集群,信息如下:

IPPORT角色
192.168.70.1307001master
192.168.70.1307002slave
192.168.70.1307003slave

1.2 準備實例并配置

要在同一臺虛擬機開啟 3 個實例,必須準備三份不同的配置文件和目錄,配置文件所在目錄也就是工作目錄。

1)創建目錄

我們創建三個文件夾,名字分別叫 7001、7002、7003:

# 進入 /usr/local/src 目錄 cd /usr/local/src # 創建目錄 mkdir 7001 7002 7003

如圖:

2)開啟 RDB,關閉 AOF(默認就是)

修改 redis-6.2.4/redis.conf 文件,將其中的持久化模式改為默認的 RDB 模式,AOF 保持關閉狀態

# 開啟RDB # save "" save 3600 1 save 300 100 save 60 10000# 關閉AOF appendonly no

3)拷貝配置文件到每個實例目錄

# 方式一:逐個拷貝 cp redis-6.2.4/redis.conf 7001 cp redis-6.2.4/redis.conf 7002 cp redis-6.2.4/redis.conf 7003# 方式二:管道組合命令,一鍵拷貝 echo 7001 7002 7003 | xargs -t -n 1 cp redis-6.2.4/redis.conf

4)修改每個實例的端口、工作目錄

修改每個文件夾內的配置文件,將端口分別修改為 7001、7002、7003,將 rdb 文件保存位置都修改為自己所在目錄(在 /usr/local/src 目錄執行下列命令):

sed -i -e 's/6379/7001/g' -e 's/dir .\//dir \/usr\/local\/src\/7001\//g' 7001/redis.conf sed -i -e 's/6379/7002/g' -e 's/dir .\//dir \/usr\/local\/src\/7002\//g' 7002/redis.conf sed -i -e 's/6379/7003/g' -e 's/dir .\//dir \/usr\/local\/src\/7003\//g' 7003/redis.conf

5)修改每個實例的聲明IP

虛擬機本身有多個 IP,為了避免將來混亂,我們需要在 redis.conf 文件中指定每一個實例的綁定 ip 信息,格式如下:

# redis實例的聲明 IP replica-announce-ip 192.168.150.101

每個目錄都要改,我們一鍵完成修改(在? /usr/local/src 目錄執行下列命令):

# 逐一執行 sed -i '1a replica-announce-ip 192.168.70.130' 7001/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7002/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7003/redis.conf# 或者一鍵修改 printf '%s\n' 7001 7002 7003 | xargs -I{} -t sed -i '1a replica-announce-ip 192.168.70.130' {}/redis.conf

如果主從都開啟了密碼 requirepass,導致不能驗證成功,在 redis 從服務器的配置文件(redis.conf)里面添加 masterauth 123321 即可(在 /usr/local/src?目錄執行下列命令):

# 逐一執行 sed -i 'masterauth 123321' 7002/redis.conf sed -i 'masterauth 123321' 7003/redis.conf# 或者意見修改 printf '%s\n' 7002 7003 | xargs -I{} -t sed -i 'masterauth 123321' {}/redis.conf

(123321 是我的主 redis 的密碼,此參數是當與主連接時的密碼驗證)

1.3 啟動

為了方便查看日志,我們可以打開 3 個 ssh 窗口,分別啟動 3 個 redis 實例,啟動命令(在 /usr/local/src?目錄執行下列命令): ?

# 第1個 redis-server 7001/redis.conf # 第2個 redis-server 7002/redis.conf # 第3個 redis-server 7003/redis.conf

如果要一鍵停止,可以運行下面命令:

printf '%s\n' 7001 7002 7003 | xargs -I{} -t redis-cli -p {} shutdown

1.4 開啟主從關系

現在三個實例還沒有任何關系,要配置主從可以使用 replicaof 或者 slaveof(5.0以前)命令。

有臨時和永久兩種模式:

  • 修改配置文件(永久生效)

    • 在 redis.conf 中添加一行配置:slaveof <masterip> <masterport>

  • 使用 redis-cli 客戶端連接到 redis 服務,執行 slaveof 命令(重啟后失效):slaveof <masterip> <masterport>

注意:在5.0以后新增命令 replicaof,與 salveof 效果一致。

這里我們使用方式二進行演示 :

1)通過redis-cli命令連接7002,執行下面命令:

# 連接 7002 redis-cli -p 7002 # 執行slaveof slaveof 192.168.150.101 7001

2)通過redis-cli命令連接7003,執行下面命令: ?

# 連接 7003 redis-cli -p 7003 # 執行slaveof slaveof 192.168.150.101 7001

3)然后連接 7001節點,查看集群狀態:

# 連接 7001 redis-cli -p 7001 # 查看狀態 info replication

結果:

1.5 測試

執行下列操作以測試:

  • 利用redis-cli連接7001,執行set num 123

  • 利用redis-cli連接7002,執行get num,再執行set num 666

  • 利用redis-cli連接7003,執行get num,再執行set num 888

可以發現,只有在7001這個master節點上可以執行寫操作,7002和7003這兩個slave節點只能執行讀操作。

Ⅱ. redis 哨兵集群搭建

2.1 集群結構

這里我們搭建一個三節點形成的 Sentinel 集群,來監管之前的 Redis 主從集群。如圖: ?

?

三個 sentinel 實例信息如下:

節點IPPORT
s1192.168.70.13027001
s2192.168.70.13027002
s3192.168.70.13027003

2.2 準備實例并配置

要在同一臺虛擬機開啟 3 個實例,必須準備三份不同的配置文件和目錄,配置文件所在目錄也就是工作目錄。

我們創建三個文件夾,名字分別叫s1、s2、s3:

# 進入/usr/local/src目錄 cd /usr/local/src # 創建目錄 mkdir s1 s2 s3

如圖:

然后我們在 s1 目錄下創建一個 sentinel.conf 文件,添加下面的內容:

port 27001 sentinel announce-ip 192.168.70.130 sentinel monitor mymaster 192.168.70.130 7001 2 sentinel down-after-milliseconds mymaster 5000 sentinel failover-timeout mymaster 60000 dir "/usr/local/src/s1"

解釋:

  • port 27001:是當前 sentinel 實例的端口

  • sentinel monitor mymaster 192.168.70.130?7001 2:指定主節點信息

    • mymaster:主節點名稱,自定義,任意寫

    • 192.168.70.130 7001:主節點的ip和端口

    • 2:選舉 master 時的 quorum 值(即超過 2 個哨兵認為此節點主觀下線,就認為此節點客觀下線)

然后將 s1/sentinel.conf 文件拷貝到 s2、s3 兩個目錄中(在 /usr/local/src?目錄執行下列命令):

# 方式一:逐個拷貝 cp s1/sentinel.conf s2 cp s1/sentinel.conf s3 # 方式二:管道組合命令,一鍵拷貝 echo s2 s3 | xargs -t -n 1 cp s1/sentinel.conf

修改 s2、s3 兩個文件夾內的配置文件,將端口分別修改為 27002、27003(在 /usr/local/src?目錄執行下列命令):

sed -i -e 's/27001/27002/g' -e 's/s1/s2/g' s2/sentinel.conf sed -i -e 's/27001/27003/g' -e 's/s1/s3/g' s3/sentinel.conf

2.3 啟動

為了方便查看日志,我們可以打開3個 ssh 窗口,分別啟動 3 個 redis實例,啟動命令(在 /usr/local/src?目錄執行下列命令): ?

# 第1個 redis-sentinel s1/sentinel.conf # 第2個 redis-sentinel s2/sentinel.conf # 第3個 redis-sentinel s3/sentinel.conf

2.4 測試

嘗試讓 master 節點 7001 宕機,查看 sentinel 日志: ?

查看7003的日志:

查看7002的日志:

2.5 redisTemplate(選)

在 Sentinel 集群監管下的 Redis 主從集群,其節點會因為自動故障轉移而發生變化,Redis 的客戶端必須感知這種變化,及時更新連接信息。Spring的RedisTemplate 底層利用 lettuce 實現了節點的感知和自動切換。

下面,我們通過一個測試來實現 RedisTemplate 集成哨兵機制。

1)在項目的pom文件中引入依賴:

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId> </dependency>

2)然后在配置文件 application.yml 中指定 redis 的 sentinel 相關信息:

spring:redis:sentinel:master: mymasternodes:- 192.168.70.130:27001- 192.168.70.130:27002- 192.168.70.130:27003

3)在項目的啟動類中,添加一個新的bean,配置讀寫分離:

@Bean public LettuceClientConfigurationBuilderCustomizer clientConfigurationBuilderCustomizer(){return clientConfigurationBuilder -> clientConfigurationBuilder.readFrom(ReadFrom.REPLICA_PREFERRED); }

這個bean中配置的就是讀寫策略,包括四種:

  • MASTER:從主節點讀取

  • MASTER_PREFERRED:優先從master節點讀取,master不可用才讀取replica

  • REPLICA:從slave(replica)節點讀取

  • REPLICA _PREFERRED:優先從slave(replica)節點讀取,所有的slave都不可用才讀取master

Ⅲ. redis 分片集群搭建?

3.1 集群結構

這里我們會在同一臺虛擬機中開啟 6 個 redis 實例,模擬分片集群,信息如下:

IPPORT角色
192.168.70.1307001master
192.168.70.1307002master
192.168.70.1307003master
192.168.70.1308001slave
192.168.70.1308002slave
192.168.70.1308003slave

3.2 準備實例并配置

創建?7001、7002、7003、8001、8002、8003 目錄(已經存在相同結點的記得刪除之前的 7001、7002、7003 目錄):

# 進入/usr/local/src目錄 cd /usr/local/src # 刪除舊的,避免配置干擾 rm -rf 7001 7002 7003 # 創建目錄 mkdir 7001 7002 7003 8001 8002 8003

在 /usr/local/src 下準備一個新的 redis.conf 文件,內容如下:

port 6379 # 開啟集群功能 cluster-enabled yes # 集群的配置文件名稱,不需要我們創建,由redis自己維護 cluster-config-file /usr/local/src/6379/nodes.conf # 節點心跳失敗的超時時間 cluster-node-timeout 5000 # 持久化文件存放目錄 dir /usr/local/src/6379 # 綁定地址 bind 0.0.0.0 # 讓redis后臺運行 daemonize yes # 注冊的實例ip replica-announce-ip 192.168.70.130 # 保護模式 protected-mode no # 數據庫數量 databases 1 # 日志 logfile /usr/local/src/6379/run.log

將這個文件拷貝到 7001、7002、7003、8001、8002、8003 目錄下(在 /usr/local/src?目錄執行下列命令):

# 執行拷貝 echo 7001 7002 7003 8001 8002 8003 | xargs -t -n 1 cp redis.conf

修改每個目錄下的 redis.conf,將其中的 6379 修改為與所在目錄一致(在 /usr/local/src?目錄執行下列命令):

# 修改配置文件 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t sed -i 's/6379/{}/g' {}/redis.conf

3.3 啟動

?因為已經配置了后臺啟動模式,所以可以直接啟動服務(在 /usr/local/src?目錄執行下列命令):

# 一鍵啟動所有服務 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-server {}/redis.conf

通過 ps 查看狀態:

ps -ef | grep redis

發現服務都已經正常啟動:

如果要關閉所有進程,可以執行命令:

ps -ef | grep redis | awk '{print $2}' | xargs kill # 或者 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-cli -p {} shutdown # 推薦

3.4 創建集群

雖然服務啟動了,但是目前每個服務之間都是獨立的,沒有任何關聯。

我們需要執行命令來創建集群,在 Redis5.0 之前創建集群比較麻煩,5.0 之后集群管理命令都集成到了 redis-cli 中。

1)Redis5.0 之前

Redis5.0 之前集群命令都是用 redis 安裝包下的 src/redis-trib.rb 來實現的。因為 redis-trib.rb 是有 ruby 語言編寫的所以需要安裝 ruby 環境。 ?

# 安裝依賴yum -y install zlib ruby rubygemsgem install redis

然后通過命令來管理集群:

# 進入redis的src目錄 cd /usr/local/src/redis-6.2.4/src # 創建集群 ./redis-trib.rb create --replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

2)Redis5.0 以后

我們使用的是 Redis6.2.4 版本,集群管理以及集成到了 redis-cli 中,格式如下:

redis-cli --cluster create --cluster-replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

命令說明:

  • redis-cli --cluster?或者?./redis-trib.rb:代表集群操作命令

  • create:代表是創建集群

  • --replicas 1?或者?--cluster-replicas 1 :指定集群中每個 master 的副本個數為 1,此時節點總數 ÷ (replicas + 1)? 得到的就是 master 的數量。因此節點列表中的前 n 個就是master,其它節點都是 slave 節點,隨機分配到不同 master

運行后的樣子:

這里輸入yes,則集群開始創建:

通過命令可以查看集群狀態:

redis-cli -p 7001 cluster nodes

3.5 測試

嘗試連接 7001 節點,存儲一個數據:

# 連接 redis-cli -c -p 7001 # 存儲數據 set num 123 # 讀取數據 get num # 再次存儲 set a 1

注意:連接時要加上參數 -c,否則操作時就會失敗

總結

以上是生活随笔為你收集整理的redis分布式集群环境搭建的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。