使用 Docker Compose 建立 Redis Cluster

之前類似的主題至少有四、五篇，其中最後一版使用 docker 建立 Redis Cluster - 更新版已經滿足自己在全 container 環境中的測試需求，雖然該篇筆記下方有網友提到想要將 redis cluster 允許對外連線，當下我並沒有花時間去了解需求跟解決問題，直到最近專案需要才又調整一版

基本環境說明

macOS Catalina 10.15.4
docker desktop community 2.3.0.2(45183)
- Engine 19.03.8
- Compose 1.25.5
images
- redis 6.0.3
- redis 5.0.9 (測試可用)

設定方式

專案結構
- redis 資料夾
  - dockerfile
  - rediscluster.conf
- docker-compose.yml
- README.md

建立 redis cluster node

dockerfile

FROM redis:6.0.3

MAINTAINER Yowko Tsai <[email protected]>

COPY rediscluster.conf /etc/redis/rediscluster.conf
ENTRYPOINT redis-server /etc/redis/rediscluster.conf

rediscluster.conf

# ip
bind 0.0.0.0
# 啟用 cluster
cluster-enabled yes
# 指定 cluster config 檔案
cluster-config-file nodes.conf
# 指定 node 無法連線時間
cluster-node-timeout 5000

#設置主服務的連接密碼
masterauth pass.123
#設置從服務的連接密碼
requirepass pass.123

docker-compose

version: '3.4'
    
services:
  redis-node1:
    build:
      context: redis
    ports:
      - "7000:7000"
      - "17000:17000"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf, --port,"7000", --cluster-announce-ip,"${ip}"]
  redis-node2:
    build:
      context: redis
    ports:
      - "7001:7001"
      - "17001:17001"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf,--port,"7001",--cluster-announce-ip,"${ip}"]
  redis-node3:
    build:
      context: redis
    ports:
      - "7002:7002"
      - "17002:17002"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf,--port,"7002",--cluster-announce-ip,"${ip}"]
  redis-node4:
    build:
      context: redis
    ports:
      - "7003:7003"
      - "17003:17003"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf,--port,"7003",--cluster-announce-ip,"${ip}"]
    depends_on:
      - redis-node1
      - redis-node2
      - redis-node3
  redis-node5:
    build:
      context: redis
    ports:
      - "7004:7004"
      - "17004:17004"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf,--port,"7004",--cluster-announce-ip,"${ip}"]
    depends_on:
      - redis-node1
      - redis-node2
      - redis-node3
  redis-node6:
    build:
      context: redis
    ports:
      - "7005:7005"
      - "17005:17005"
    restart: always
    entrypoint: [redis-server, /etc/redis/rediscluster.conf,--port,"7005",--cluster-announce-ip,"${ip}"]
    depends_on:
      - redis-node1
      - redis-node2
      - redis-node3
  redis-cluster-creator:
    image: redis:6.0.3
    entrypoint: [/bin/sh,-c,'echo "yes" | redis-cli -a pass.123 --cluster create ${ip}:7000 ${ip}:7001 ${ip}:7002 ${ip}:7003 ${ip}:7004 ${ip}:7005 --cluster-replicas 1']
    depends_on:
      - redis-node1
      - redis-node2
      - redis-node3
      - redis-node4
      - redis-node5
      - redis-node6

使用方式

ip=$(ipconfig getifaddr en0) docker-compose up -d --build

實際效果

心得

這次的調整優化項目有

不需自行額外建立 network
~~使用 host~~ 經網友提醒後重新 review，發現不需要
不需指定每個 container ip
自行分配，但 cluster node 間溝通透過 host ip 與 port
不需寫死 master-slave
由 redis cluster 的內部機制處理
不需自行使用 dockerfile 建立三個 sentinel
由 redis cluster 的內部機制處理 (之前 ip 跟 port 寫太死，需要自行控制)
不需自行使用 dockerfile 來設定 cluster
透過 docker compose 中的 service 來進行(之前我試不出 override entrypoint 的做法)

經過以上這些調整，就可以讓外部 redis client 連線至這次建立的 redis cluster 但還是要再次提醒這個做法僅適合用於測試

除此之外，我比較喜歡這樣透過 dockerfile 搭配 docker-compose 的做法，像是 helm 或是 docker-machine 這種包裝過多，一眼很難看透的做法對我來說就像是個黑箱，你不知道裡面包了什麼、script 安不安全、是不是多執行了什麼讓效能大降之類的

完整 source code 請參考 yowko/docker-compose-redis-cluster

文章目錄

使用 Docker Compose 建立 Redis Cluster

基本環境說明

設定方式

心得

參考資訊