當前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

redis分布式集群环境搭建

發布時間：2024/5/15 编程问答 62 豆豆

生活随笔收集整理的這篇文章主要介紹了 redis分布式集群环境搭建小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

????????redis 分布式集群可分為主從集群、哨兵集群、分片集群，本片文章我們就來分別介紹這三種集群環境的搭建。

????????本次搭建環境為 Linux 虛擬機系統。

????????在搭建 redis集群之前，需要先在 linux 系統中安裝部署單機的 redis（安裝目錄為： /usr/local/src ），其詳細步驟可點擊如下鏈接：Linux云服務器安裝部署redis詳細步驟

Ⅰ. redis 主從集群搭建

1.1 集群結構?

我們搭建的主從集群結構如圖：

共包含三個節點，一個主節點，兩個從節點（主節點用于寫操作，從節點只能進行讀操作）。

這里我們會在同一臺虛擬機中開啟 3 個 redis 實例，模擬主從集群，信息如下：

IPPORT角色

192.168.70.130	7001	master
192.168.70.130	7002	slave
192.168.70.130	7003	slave

1.2 準備實例并配置

要在同一臺虛擬機開啟 3 個實例，必須準備三份不同的配置文件和目錄，配置文件所在目錄也就是工作目錄。

1）創建目錄

我們創建三個文件夾，名字分別叫 7001、7002、7003：

# 進入 /usr/local/src 目錄 cd /usr/local/src # 創建目錄 mkdir 7001 7002 7003

如圖：

2）開啟 RDB，關閉 AOF（默認就是）

修改 redis-6.2.4/redis.conf 文件，將其中的持久化模式改為默認的 RDB 模式，AOF 保持關閉狀態

# 開啟RDB # save "" save 3600 1 save 300 100 save 60 10000# 關閉AOF appendonly no

3）拷貝配置文件到每個實例目錄

# 方式一：逐個拷貝 cp redis-6.2.4/redis.conf 7001 cp redis-6.2.4/redis.conf 7002 cp redis-6.2.4/redis.conf 7003# 方式二：管道組合命令，一鍵拷貝 echo 7001 7002 7003 | xargs -t -n 1 cp redis-6.2.4/redis.conf

4）修改每個實例的端口、工作目錄

修改每個文件夾內的配置文件，將端口分別修改為 7001、7002、7003，將 rdb 文件保存位置都修改為自己所在目錄（在 /usr/local/src 目錄執行下列命令）：

sed -i -e 's/6379/7001/g' -e 's/dir .\//dir \/usr\/local\/src\/7001\//g' 7001/redis.conf sed -i -e 's/6379/7002/g' -e 's/dir .\//dir \/usr\/local\/src\/7002\//g' 7002/redis.conf sed -i -e 's/6379/7003/g' -e 's/dir .\//dir \/usr\/local\/src\/7003\//g' 7003/redis.conf

5）修改每個實例的聲明IP

虛擬機本身有多個 IP，為了避免將來混亂，我們需要在 redis.conf 文件中指定每一個實例的綁定 ip 信息，格式如下：

# redis實例的聲明 IP replica-announce-ip 192.168.150.101

每個目錄都要改，我們一鍵完成修改（在? /usr/local/src 目錄執行下列命令）：

# 逐一執行 sed -i '1a replica-announce-ip 192.168.70.130' 7001/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7002/redis.conf sed -i '1a replica-announce-ip 192.168.70.130' 7003/redis.conf# 或者一鍵修改 printf '%s\n' 7001 7002 7003 | xargs -I{} -t sed -i '1a replica-announce-ip 192.168.70.130' {}/redis.conf

如果主從都開啟了密碼 requirepass，導致不能驗證成功，在 redis 從服務器的配置文件（redis.conf）里面添加 masterauth 123321 即可（在 /usr/local/src?目錄執行下列命令）：

# 逐一執行 sed -i 'masterauth 123321' 7002/redis.conf sed -i 'masterauth 123321' 7003/redis.conf# 或者意見修改 printf '%s\n' 7002 7003 | xargs -I{} -t sed -i 'masterauth 123321' {}/redis.conf

(123321 是我的主 redis 的密碼，此參數是當與主連接時的密碼驗證)

1.3 啟動

為了方便查看日志，我們可以打開 3 個 ssh 窗口，分別啟動 3 個 redis 實例，啟動命令（在 /usr/local/src?目錄執行下列命令）： ?

# 第1個 redis-server 7001/redis.conf # 第2個 redis-server 7002/redis.conf # 第3個 redis-server 7003/redis.conf

如果要一鍵停止，可以運行下面命令：

printf '%s\n' 7001 7002 7003 | xargs -I{} -t redis-cli -p {} shutdown

1.4 開啟主從關系

現在三個實例還沒有任何關系，要配置主從可以使用 replicaof 或者 slaveof（5.0以前）命令。

有臨時和永久兩種模式：

修改配置文件（永久生效）
- 在 redis.conf 中添加一行配置：slaveof <masterip> <masterport>
使用 redis-cli 客戶端連接到 redis 服務，執行 slaveof 命令（重啟后失效）：slaveof <masterip> <masterport>

注意：在5.0以后新增命令 replicaof，與 salveof 效果一致。

這里我們使用方式二進行演示：

1）通過redis-cli命令連接7002，執行下面命令：

# 連接 7002 redis-cli -p 7002 # 執行slaveof slaveof 192.168.150.101 7001

2）通過redis-cli命令連接7003，執行下面命令： ?

# 連接 7003 redis-cli -p 7003 # 執行slaveof slaveof 192.168.150.101 7001

3）然后連接 7001節點，查看集群狀態：

# 連接 7001 redis-cli -p 7001 # 查看狀態 info replication

結果：

1.5 測試

執行下列操作以測試：

利用redis-cli連接7001，執行set num 123
利用redis-cli連接7002，執行get num，再執行set num 666
利用redis-cli連接7003，執行get num，再執行set num 888

可以發現，只有在7001這個master節點上可以執行寫操作，7002和7003這兩個slave節點只能執行讀操作。

Ⅱ. redis 哨兵集群搭建

2.1 集群結構

這里我們搭建一個三節點形成的 Sentinel 集群，來監管之前的 Redis 主從集群。如圖： ?

三個 sentinel 實例信息如下：

節點IPPORT

s1	192.168.70.130	27001
s2	192.168.70.130	27002
s3	192.168.70.130	27003

2.2 準備實例并配置

要在同一臺虛擬機開啟 3 個實例，必須準備三份不同的配置文件和目錄，配置文件所在目錄也就是工作目錄。

我們創建三個文件夾，名字分別叫s1、s2、s3：

# 進入/usr/local/src目錄 cd /usr/local/src # 創建目錄 mkdir s1 s2 s3

如圖：

然后我們在 s1 目錄下創建一個 sentinel.conf 文件，添加下面的內容：

port 27001 sentinel announce-ip 192.168.70.130 sentinel monitor mymaster 192.168.70.130 7001 2 sentinel down-after-milliseconds mymaster 5000 sentinel failover-timeout mymaster 60000 dir "/usr/local/src/s1"

解釋：

port 27001：是當前 sentinel 實例的端口
sentinel monitor mymaster 192.168.70.130?7001 2：指定主節點信息
- mymaster：主節點名稱，自定義，任意寫
- 192.168.70.130 7001：主節點的ip和端口
- 2：選舉 master 時的 quorum 值（即超過 2 個哨兵認為此節點主觀下線，就認為此節點客觀下線）

然后將 s1/sentinel.conf 文件拷貝到 s2、s3 兩個目錄中（在 /usr/local/src?目錄執行下列命令）：

# 方式一：逐個拷貝 cp s1/sentinel.conf s2 cp s1/sentinel.conf s3 # 方式二：管道組合命令，一鍵拷貝 echo s2 s3 | xargs -t -n 1 cp s1/sentinel.conf

修改 s2、s3 兩個文件夾內的配置文件，將端口分別修改為 27002、27003（在 /usr/local/src?目錄執行下列命令）：

sed -i -e 's/27001/27002/g' -e 's/s1/s2/g' s2/sentinel.conf sed -i -e 's/27001/27003/g' -e 's/s1/s3/g' s3/sentinel.conf

2.3 啟動

為了方便查看日志，我們可以打開3個 ssh 窗口，分別啟動 3 個 redis實例，啟動命令（在 /usr/local/src?目錄執行下列命令）： ?

# 第1個 redis-sentinel s1/sentinel.conf # 第2個 redis-sentinel s2/sentinel.conf # 第3個 redis-sentinel s3/sentinel.conf

2.4 測試

嘗試讓 master 節點 7001 宕機，查看 sentinel 日志： ?

查看7003的日志：

查看7002的日志：

2.5 redisTemplate（選）

在 Sentinel 集群監管下的 Redis 主從集群，其節點會因為自動故障轉移而發生變化，Redis 的客戶端必須感知這種變化，及時更新連接信息。Spring的RedisTemplate 底層利用 lettuce 實現了節點的感知和自動切換。

下面，我們通過一個測試來實現 RedisTemplate 集成哨兵機制。

1）在項目的pom文件中引入依賴：

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId> </dependency>

2）然后在配置文件 application.yml 中指定 redis 的 sentinel 相關信息：

spring:redis:sentinel:master: mymasternodes:- 192.168.70.130:27001- 192.168.70.130:27002- 192.168.70.130:27003

3）在項目的啟動類中，添加一個新的bean，配置讀寫分離：

@Bean public LettuceClientConfigurationBuilderCustomizer clientConfigurationBuilderCustomizer(){return clientConfigurationBuilder -> clientConfigurationBuilder.readFrom(ReadFrom.REPLICA_PREFERRED); }

這個bean中配置的就是讀寫策略，包括四種：

MASTER：從主節點讀取
MASTER_PREFERRED：優先從master節點讀取，master不可用才讀取replica
REPLICA：從slave（replica）節點讀取
REPLICA _PREFERRED：優先從slave（replica）節點讀取，所有的slave都不可用才讀取master

Ⅲ. redis 分片集群搭建?

3.1 集群結構

這里我們會在同一臺虛擬機中開啟 6 個 redis 實例，模擬分片集群，信息如下：

IPPORT角色

192.168.70.130	7001	master
192.168.70.130	7002	master
192.168.70.130	7003	master
192.168.70.130	8001	slave
192.168.70.130	8002	slave
192.168.70.130	8003	slave

3.2 準備實例并配置

創建?7001、7002、7003、8001、8002、8003 目錄（已經存在相同結點的記得刪除之前的 7001、7002、7003 目錄）：

# 進入/usr/local/src目錄 cd /usr/local/src # 刪除舊的，避免配置干擾 rm -rf 7001 7002 7003 # 創建目錄 mkdir 7001 7002 7003 8001 8002 8003

在 /usr/local/src 下準備一個新的 redis.conf 文件，內容如下：

port 6379 # 開啟集群功能 cluster-enabled yes # 集群的配置文件名稱，不需要我們創建，由redis自己維護 cluster-config-file /usr/local/src/6379/nodes.conf # 節點心跳失敗的超時時間 cluster-node-timeout 5000 # 持久化文件存放目錄 dir /usr/local/src/6379 # 綁定地址 bind 0.0.0.0 # 讓redis后臺運行 daemonize yes # 注冊的實例ip replica-announce-ip 192.168.70.130 # 保護模式 protected-mode no # 數據庫數量 databases 1 # 日志 logfile /usr/local/src/6379/run.log

將這個文件拷貝到 7001、7002、7003、8001、8002、8003 目錄下（在 /usr/local/src?目錄執行下列命令）:

# 執行拷貝 echo 7001 7002 7003 8001 8002 8003 | xargs -t -n 1 cp redis.conf

修改每個目錄下的 redis.conf，將其中的 6379 修改為與所在目錄一致（在 /usr/local/src?目錄執行下列命令）：

# 修改配置文件 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t sed -i 's/6379/{}/g' {}/redis.conf

3.3 啟動

?因為已經配置了后臺啟動模式，所以可以直接啟動服務（在 /usr/local/src?目錄執行下列命令）：

# 一鍵啟動所有服務 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-server {}/redis.conf

通過 ps 查看狀態：

ps -ef | grep redis

發現服務都已經正常啟動：

如果要關閉所有進程，可以執行命令：

ps -ef | grep redis | awk '{print $2}' | xargs kill # 或者 printf '%s\n' 7001 7002 7003 8001 8002 8003 | xargs -I{} -t redis-cli -p {} shutdown # 推薦

3.4 創建集群

雖然服務啟動了，但是目前每個服務之間都是獨立的，沒有任何關聯。

我們需要執行命令來創建集群，在 Redis5.0 之前創建集群比較麻煩，5.0 之后集群管理命令都集成到了 redis-cli 中。

1）Redis5.0 之前

Redis5.0 之前集群命令都是用 redis 安裝包下的 src/redis-trib.rb 來實現的。因為 redis-trib.rb 是有 ruby 語言編寫的所以需要安裝 ruby 環境。 ?

# 安裝依賴yum -y install zlib ruby rubygemsgem install redis

然后通過命令來管理集群：

# 進入redis的src目錄 cd /usr/local/src/redis-6.2.4/src # 創建集群 ./redis-trib.rb create --replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

2）Redis5.0 以后

我們使用的是 Redis6.2.4 版本，集群管理以及集成到了 redis-cli 中，格式如下：

redis-cli --cluster create --cluster-replicas 1 192.168.70.130:7001 192.168.70.130:7002 192.168.70.130:7003 192.168.70.130:8001 192.168.70.130:8002 192.168.70.130:8003

命令說明：

redis-cli --cluster?或者?./redis-trib.rb：代表集群操作命令
create：代表是創建集群
--replicas 1?或者?--cluster-replicas 1 ：指定集群中每個 master 的副本個數為 1，此時節點總數 ÷ (replicas + 1)? 得到的就是 master 的數量。因此節點列表中的前 n 個就是master，其它節點都是 slave 節點，隨機分配到不同 master

運行后的樣子：

這里輸入yes，則集群開始創建：

通過命令可以查看集群狀態：

redis-cli -p 7001 cluster nodes

3.5 測試

嘗試連接 7001 節點，存儲一個數據：

# 連接 redis-cli -c -p 7001 # 存儲數據 set num 123 # 讀取數據 get num # 再次存儲 set a 1

注意：連接時要加上參數 -c，否則操作時就會失敗

總結

以上是生活随笔為你收集整理的redis分布式集群环境搭建的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。