Redis 集群cluster
- 集群簡介
- 集群作用
- Redis集群結構設計
- 資料存盤設計
- 集群內部通訊設計
- cluster集群結構搭建
- 主從下線和主從切換
集群簡介
- 集群就是使用網路將若干臺計算機聯通起來，并提供統一的管理方式，使其對外呈現單機的服務效果
集群作用
- 分散單臺服務器的訪問壓力，實作負載均衡
- 分散單臺服務器的存盤壓力，實作可擴展性
- 降低單臺服務器宕機帶來的業務災難
Redis集群結構設計
資料存盤設計
- 通過演算法設計，計算出key應該保存的位置
- 將所有的存盤空間計劃切割成16384份，每臺主機保存一部分每份代表的是一個存盤空間，不是一個key的保存空間
- 將key按照計算出的結果放到對應的存盤空間
-
key通過hash演算法計算出一個值，然后拿這個值%16384
-
得到一個數（假如是37）為key的保存位置，然后再存入相應的存盤空間位置
-
假如又增加了一個節點，之前每個節點都會拿出部分槽給新的節點
-
如果是去除節點，則把被去除節點的槽加入到存在的節點當作
集群內部通訊設計
- 各個資料庫互相通信，保存各個庫中槽的編號資料
- 客戶端發出一個key訪問A，通過演算法計算出key的存盤位置
- 如果一次命中，直接回傳
- 一次未命中，告知具體位置
- 一次命中或者兩次命中提高資料訪問效率
cluster集群結構搭建
- 原生安裝（單條命令）
- 配置服務器（3主3從）
- 建立通信（Meet）
- 分槽（Slot）
- 搭建主從（master-slave）
- 工具安裝（批處理）
Cluster配置
-
添加節點
cluster-enabled yes|no
-
cluster組態檔名，該檔案屬于自動生成，僅用于快速查找檔案并查詢檔案內容
cluster-config-file
-
節點服務回應超時時間，用于判定該節點是否下線或切換為從節點
cluster-node-timeout
-
master連接的slave最小數量
cluster-migration-barrier
Cluster節點操作命令
-
查看集群節點資訊
cluster nodes -
進入一個從節點 redis，切換其主節點
cluster replicate <master-id> -
發現一個新節點，新增主節點
cluster meet ip:port -
忽略一個沒有solt的節點
cluster forget <id> -
手動故障轉移
cluster failover
首先清空之前的資料
[root@maomao ~]# cd /usr/local/redis/data/
[root@maomao data]# ls
appendonly-6379.aof dump-6379.rdb dump.rdb
[root@maomao data]# rm -rf *
組態檔添加
cluster-enabled yes # 開啟cluster
cluster-config-file nodes-6379.conf # 組態檔和名字
cluster-node-timeout 10000 # cluster下線時間，超時時間為10秒
復制六個組態檔
sed 's/6379/6380/g' redis-6379.conf > redis-6380.conf
sed 's/6379/6381/g' redis-6379.conf > redis-6381.conf
sed 's/6379/6382/g' redis-6379.conf > redis-6382.conf
sed 's/6379/6383/g' redis-6379.conf > redis-6383.conf
sed 's/6379/6384/g' redis-6379.conf > redis-6384.conf
sed 's/6379/6385/g' redis-6379.conf > redis-6385.conf
檢查
cat redis-6385.conf |grep -v '#' |grep -v '^$'
開啟服務
redis-server redis_config/redis-6379.conf
...
redis-server redis_config/redis-6384.conf
[root@maomao bin]# ps aux |grep redis-
root 2116 0.2 0.5 165020 10824 pts/0 Sl+ 02:23 0:00 redis-server 127.0.0.1:6379 [cluster]
root 2121 0.2 0.5 165020 10664 pts/7 Sl+ 02:23 0:00 redis-server 127.0.0.1:6380 [cluster]
root 2126 0.2 0.5 165020 10720 pts/6 Sl+ 02:23 0:00 redis-server 127.0.0.1:6381 [cluster]
root 2131 0.2 0.6 171164 12768 pts/2 Sl+ 02:23 0:00 redis-server 127.0.0.1:6382 [cluster]
root 2136 0.2 0.5 165020 10760 pts/5 Sl+ 02:24 0:00 redis-server 127.0.0.1:6383 [cluster]
root 2141 0.1 0.5 165020 10788 pts/1 Sl+ 02:24 0:00 redis-server 127.0.0.1:6384 [cluster]
redis-cli --cluster create 127.0.0.1:6379 127.0.0.1:6380 127.0.0.1:6381 127.0.0.1:6382 127.0.0.1:6383 127.0.0.1:6384 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 127.0.0.1:6383 to 127.0.0.1:6379
Adding replica 127.0.0.1:6384 to 127.0.0.1:6380
Adding replica 127.0.0.1:6382 to 127.0.0.1:6381
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: 56aa54f614a2fc8f99e30a109d5e6a91d723193e 127.0.0.1:6379
slots:[0-5460] (5461 slots) master
M: 083eb7940fb5d5444563e3a48d36a1609b8d5af4 127.0.0.1:6380
slots:[5461-10922] (5462 slots) master
M: f515c69256533ebb17d2aabefe81d6e630f7eee5 127.0.0.1:6381
slots:[10923-16383] (5461 slots) master
S: d25e2d50c3b6136cafc3cdd0a5fef0e86fbf66fb 127.0.0.1:6382
replicates 56aa54f614a2fc8f99e30a109d5e6a91d723193e
S: 86f0f88285ca648df41e8f348e41cf5ef520bdae 127.0.0.1:6383
replicates 083eb7940fb5d5444563e3a48d36a1609b8d5af4
S: 738d205c923600d6f7c8ea8df8313527b8267b95 127.0.0.1:6384
replicates f515c69256533ebb17d2aabefe81d6e630f7eee5
Can I set the above configuration? (type 'yes' to accept):
6379 6380 6381 是master
6382 6383 6384 是slave
slots 就是槽 三個master分的槽都一樣多 平均分配
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
>>> Performing Cluster Check (using node 127.0.0.1:6379)
M: 56aa54f614a2fc8f99e30a109d5e6a91d723193e 127.0.0.1:6379
slots:[0-5460] (5461 slots) master
1 additional replica(s)
S: d25e2d50c3b6136cafc3cdd0a5fef0e86fbf66fb 127.0.0.1:6382
slots: (0 slots) slave
replicates 56aa54f614a2fc8f99e30a109d5e6a91d723193e
S: 86f0f88285ca648df41e8f348e41cf5ef520bdae 127.0.0.1:6383
slots: (0 slots) slave
replicates 083eb7940fb5d5444563e3a48d36a1609b8d5af4
M: 083eb7940fb5d5444563e3a48d36a1609b8d5af4 127.0.0.1:6380
slots:[5461-10922] (5462 slots) master
1 additional replica(s)
M: f515c69256533ebb17d2aabefe81d6e630f7eee5 127.0.0.1:6381
slots:[10923-16383] (5461 slots) master
1 additional replica(s)
S: 738d205c923600d6f7c8ea8df8313527b8267b95 127.0.0.1:6384
slots: (0 slots) slave
replicates f515c69256533ebb17d2aabefe81d6e630f7eee5
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
可以查看日志
[root@maomao bin]# cat /usr/local/redis/data/nodes-6379.conf
集群搭建完成
測驗
[root@maomao bin]# redis-cli
127.0.0.1:6379> set name maomao
(error) MOVED 5798 127.0.0.1:6380 # 叫我們去這個槽操作
[root@maomao bin]# redis-cli -c # 操控集群使用 redis-cli -c
127.0.0.1:6379> set name maomao
-> Redirected to slot [5798] located at 127.0.0.1:6380
OK
我們在6382獲取key 失敗
[root@maomao bin]# redis -cli -c -p 6382
-bash: redis: command not found
[root@maomao bin]# redis-cli -c -p 6382
127.0.0.1:6382> get name
-> Redirected to slot [5798] located at
127.0.0.1:6380
"maomao"
127.0.0.1:6380> exit
連接到6380就能夠獲取key
[root@maomao bin]# redis-cli -c -p 6380
127.0.0.1:6380> get name
"maomao"
主從下線和主從切換
我們將一個主節點下線，然后查看資訊
127.0.0.1:6380> cluster nodes
86f0f88285ca648df41e8f348e41cf5ef520bdae 127.0.0.1:6383@16383 slave 083eb7940fb5d5444563e3a48d36a1609b8d5af4 0 1618815771240
2 connected
083eb7940fb5d5444563e3a48d36a1609b8d5af4 127.0.0.1:6380@16380 myself,master - 0 1618815770000 2 connected 5461-10922
56aa54f614a2fc8f99e30a109d5e6a91d723193e 127.0.0.1:6379@16379 master,fail - 1618815743184 1618815740000 1 disconnected
d25e2d50c3b6136cafc3cdd0a5fef0e86fbf66fb 127.0.0.1:6382@16382 master - 0 1618815768232 7 connected 0-5460
f515c69256533ebb17d2aabefe81d6e630f7eee5 127.0.0.1:6381@16381 master - 0 1618815770000 3 connected 10923-16383
738d205c923600d6f7c8ea8df8313527b8267b95 127.0.0.1:6384@16384 slave f515c69256533ebb17d2aabefe81d6e630f7eee5 0 1618815770238
3 connected
master,fail意思是master會回來
轉載請註明出處，本文鏈接：https://www.uj5u.com/ruanti/278446.html
標籤：其他