Docker部署Redis集群

本文详细介绍了如何根据B站【狂神说Java】的视频教程,通过Docker部署并管理Redis集群,包括创建网卡、配置节点、启动服务、创建集群,以及验证高可用性。

注:本文是本人根据B站【狂神说Java】Docker视频所写,仅供学习参考。

部署Redis集群

在这里插入图片描述

# 创建一redis网卡
docker network create redis --subnet 172.38.0.0/16

# 创建网卡
[root@localhost ~]# docker network create redis --subnet 172.38.0.0/16
bccfe4e04aa5137dcdb3d803ac424bbf7606ec7830b56e884b68f49781931fe0
# 查看网卡
[root@localhost ~]# docker network ls
NETWORK ID          NAME                DRIVER              SCOPE
64e210bfceab        bridge              bridge              local
9424102af469        host                host                local
252386dce4b5        mynet               bridge              local
06c9c2b6a2ac        none                null                local
bccfe4e04aa5        redis               bridge              local
[root@localhost ~]# docker network inspect redis
[
    {
        "Name": "redis",
        "Id": "bccfe4e04aa5137dcdb3d803ac424bbf7606ec7830b56e884b68f49781931fe0",
        "Created": "2020-11-14T19:34:58.141088965-05:00",
        "Scope": "local",
        "Driver": "bridge",
        "EnableIPv6": false,
        "IPAM": {
            "Driver": "default",
            "Options": {},
            "Config": [
                {
                    "Subnet": "172.38.0.0/16"
                }
            ]
        },
        "Internal": false,
        "Attachable": false,
        "Ingress": false,
        "ConfigFrom": {
            "Network": ""
        },
        "ConfigOnly": false,
        "Containers": {},
        "Options": {},
        "Labels": {}
    }
]


# 通过脚本创建六个redis配置
for port in $(seq 1 6); \
do \
mkdir -p /data/docker/redis/node-${port}/conf
touch /data/docker/redis/node-${port}/conf/redis.conf
cat <<EOF>> /data/docker/redis/node-${port}/conf/redis.conf
port 6379
bind 0.0.0.0
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 172.38.0.1${port}
cluster-announce-port 6379
cluster-announce-bus-port 16379
appendonly yes
EOF
done

# 参数说明
(1)port(端口号)
(2)masterauth(设置集群节点间访问密码,跟下面一致)
(3)requirepass(设置redis访问密码)
(4)cluster-enabled yes(启动集群模式)
(5)cluster-config-file nodes.conf(集群节点信息文件)
(6)cluster-node-timeout 5000(redis节点宕机被发现的时间)
(7)cluster-announce-ip(集群节点的汇报ip,防止nat,预先填写为网关ip后续需要手动修改配置文件)
(8)cluster-announce-port(集群节点的汇报port,防止nat)
(9)cluster-announce-bus-port(集群节点的汇报bus-port,防止nat)
(10) appendonly yes(开启aof)

# 查看是否创建成功

在这里插入图片描述

# 使用脚本 启动redis
for port in $(seq 1 6); \
do \
docker run -p 637${port}:6379 -p 1637${port}:16379 --name redis-${port} \
-v /data/docker/redis/node-${port}/data:/data \
-v /data/docker/redis/node-${port}/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.1${port} redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf; \
done

#查看是否启动成功
[root@localhost conf]# docker ps

在这里插入图片描述

我们先进入一个节点查看一下并创建集群

[root@localhost conf]# docker exec -it redis-1 /bin/sh
/data # ls
appendonly.aof  nodes.conf

# 创建集群 
# redis-cli --cluster create 172.38.0.11:6379 172.38.0.12:6379 172.38.0.13:6379 172.38.0.14:6379 172.38.0.15:6379 172.38.0.16:6379 --cluster-replicas 1

/data # redis-cli --cluster create 172.38.0.11:6379 172.38.0.12:6379 172.38.0.13:6379 172.38.0.14:6379 172.38.0.15:6379 172.38.0.16:6379 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 172.38.0.15:6379 to 172.38.0.11:6379
Adding replica 172.38.0.16:6379 to 172.38.0.12:6379
Adding replica 172.38.0.14:6379 to 172.38.0.13:6379
M: 57a89f3899038df553552b43bbe2a16acefd8946 172.38.0.11:6379
   slots:[0-5460] (5461 slots) master
M: b691f1158ff047fc978aeccf4257eb33cd2013c3 172.38.0.12:6379
   slots:[5461-10922] (5462 slots) master
M: 9fbbb42d4319e25ca420a13faa9213095e38a1e1 172.38.0.13:6379
   slots:[10923-16383] (5461 slots) master
S: e3025ebdf418476ccfbcc2148e24fd4c40d8bad2 172.38.0.14:6379
   replicates 9fbbb42d4319e25ca420a13faa9213095e38a1e1
S: a43399529478b9f57504125bdb9eef6a1d6665b7 172.38.0.15:6379
   replicates 57a89f3899038df553552b43bbe2a16acefd8946
S: 62087c69025556784437f45646aecaef40f5959b 172.38.0.16:6379
   replicates b691f1158ff047fc978aeccf4257eb33cd2013c3
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
...
>>> Performing Cluster Check (using node 172.38.0.11:6379)
M: 57a89f3899038df553552b43bbe2a16acefd8946 172.38.0.11:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 62087c69025556784437f45646aecaef40f5959b 172.38.0.16:6379
   slots: (0 slots) slave
   replicates b691f1158ff047fc978aeccf4257eb33cd2013c3
S: e3025ebdf418476ccfbcc2148e24fd4c40d8bad2 172.38.0.14:6379
   slots: (0 slots) slave
   replicates 9fbbb42d4319e25ca420a13faa9213095e38a1e1
M: 9fbbb42d4319e25ca420a13faa9213095e38a1e1 172.38.0.13:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
M: b691f1158ff047fc978aeccf4257eb33cd2013c3 172.38.0.12:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: a43399529478b9f57504125bdb9eef6a1d6665b7 172.38.0.15:6379
   slots: (0 slots) slave
   replicates 57a89f3899038df553552b43bbe2a16acefd8946
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

# 连接集群查看集群信息
/data # redis-cli -c

127.0.0.1:6379> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:203
cluster_stats_messages_pong_sent:214
cluster_stats_messages_sent:417
cluster_stats_messages_ping_received:209
cluster_stats_messages_pong_received:203
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:417

127.0.0.1:6379> cluster nodes
62087c69025556784437f45646aecaef40f5959b 172.38.0.16:6379@16379 slave b691f1158ff047fc978aeccf4257eb33cd2013c3 0 1605404296047 6 connected
e3025ebdf418476ccfbcc2148e24fd4c40d8bad2 172.38.0.14:6379@16379 slave 9fbbb42d4319e25ca420a13faa9213095e38a1e1 0 1605404296000 4 connected
9fbbb42d4319e25ca420a13faa9213095e38a1e1 172.38.0.13:6379@16379 master - 0 1605404296249 3 connected 10923-16383
b691f1158ff047fc978aeccf4257eb33cd2013c3 172.38.0.12:6379@16379 master - 0 1605404296752 2 connected 5461-10922
a43399529478b9f57504125bdb9eef6a1d6665b7 172.38.0.15:6379@16379 slave 57a89f3899038df553552b43bbe2a16acefd8946 0 1605404295541 5 connected
57a89f3899038df553552b43bbe2a16acefd8946 172.38.0.11:6379@16379 myself,master - 0 1605404294000 1 connected 0-5460

在这里插入图片描述

# 测试高可用
# 我们存放一个值查看一下
127.0.0.1:6379> set a b
-> Redirected to slot [15495] located at 172.38.0.13:6379
OK

# 发现 a b 值存放在 172.38.0.13 主机中 那么他的从机也存有 a b 的值。
# 如果高可用正常的话,如果172.38.0.13主机宕机,我们将从他的从机拿到数据

在这里插入图片描述

# 我们停掉172.38.0.13主机 测试数据是否可拿到
[root@localhost ~]# docker ps
CONTAINER ID        IMAGE                    COMMAND                  CREATED             STATUS              PORTS                                              NAMES
2b58513d4df0        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6376->6379/tcp, 0.0.0.0:16376->16379/tcp   redis-6
63fb523644e5        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6375->6379/tcp, 0.0.0.0:16375->16379/tcp   redis-5
a8258b437bf4        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6374->6379/tcp, 0.0.0.0:16374->16379/tcp   redis-4
873301a8162f        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6373->6379/tcp, 0.0.0.0:16373->16379/tcp   redis-3
f03254c9fe8a        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6372->6379/tcp, 0.0.0.0:16372->16379/tcp   redis-2
148f66e09533        redis:5.0.9-alpine3.11   "docker-entrypoint.s…"   28 minutes ago      Up 28 minutes       0.0.0.0:6371->6379/tcp, 0.0.0.0:16371->16379/tcp   redis-1
[root@localhost ~]# docker stop redis-3
redis-3

# 停止 redis-3

在这里插入图片描述

# 获取 a 
172.38.0.13:6379> get a
Error: Operation timed out # 连接超时
# 重新连接 获取a的值
/data # redis-cli -c
127.0.0.1:6379> get a
-> Redirected to slot [15495] located at 172.38.0.14:6379
"b"

# 我依然可以获取a 的值 此时的a的值从172.38.0.14中获取到
# 我们查看节点信息会发现 172.38.0.13 fail 宕机,此时 172.38.0.14 由之前的 slave 变为 master 从从机变成了主机。这就是高可用!!!
# docker搭建Redis集群成功!!!

在这里插入图片描述

使用 Docker 部署 Redis 集群,可按以下详细步骤操作: ### 1. 配置 Redis 容器和网络 - **创建自定义网络**:使用 `docker network create` 命令创建一个自定义的网络,用于 Redis 集群节点之间的通信。示例命令如下: ```bash docker network create redis-net ``` - **生成配置信息**:在当前目录下生成 `conf` 和 `data` 目录,并为每个节点生成配置文件。以下是一个示例脚本,创建 7001 - 7003 端口的节点配置: ```bash for port in `seq 7001 7003`; do mkdir -p ./${port}/conf \ && PORT=${port} envsubst < ./redis-cluster.tmpl > ./${port}/conf/redis.conf \ && mkdir -p ./${port}/data; done ``` 若不想设置密码,可把 `masterauth` 和 `requirepass` 注释掉 [^4]。 ### 2. 启动 Redis 容器 - **使用 Dockerfile 构建并启动(可选)**:在 `redis` 目录下创建 `Dockerfile` 进行编辑,示例如下: ```dockerfile # 第一阶段:构建阶段 FROM ubuntu:22.04 AS buildstage # 更新包列表并安装必要的构建工具和依赖 RUN apt-get update && apt-get install -y \ build-essential \ wget \ gcc \ g++ \ make \ && rm -rf /var/lib/apt/lists/* # 下载 Redis 源码和配置文件 ADD redis-7.0.15.tar.gz / ADD redis.conf /redis/ # 切换到 Redis 源码目录并编译 WORKDIR /redis-7.0.15 RUN make # 将 Redis 可执行文件移动到指定目录 RUN mv /redis-7.0.15/src/redis-server /redis/ && mv /redis-7.0.15/src/redis-cli /redis/ ENTRYPOINT ["/redis/redis-server", "/redis/redis.conf"] # 第二阶段:运行阶段 FROM ubuntu:22.04 RUN mkdir -p /data/redis && mkdir -p /redis COPY --from=buildstage /redis /redis EXPOSE 6379 ENTRYPOINT ["/redis/redis-server", "/redis/redis.conf"] ``` 构建并启动容器。 - **直接使用 Docker 命令启动**:使用 `docker run` 命令启动 Redis 容器,挂载配置文件和数据卷。示例命令如下: ```bash for port in `seq 7001 7003`; do docker run -d -ti -p ${port}:${port} -p 1${port}:1${port} \ -v /opt/redis/${port}/conf/redis.conf:/usr/local/etc/redis/redis.conf \ -v /opt/redis/${port}/data:/data \ --restart always --name redis-${port} --net redis-net \ --sysctl net.core.somaxconn=1024 redis:6.0.5-alpine redis-server /usr/local/etc/redis/redis.conf; done ``` 此命令会创建 3 个 Redis 容器,分别监听 7001 - 7003 端口 [^2][^4]。 ### 3. 设置 Redis 集群 - **创建集群**:使用 `redis-cli` 工具创建 Redis 集群。在创建过程中可能会遇到异常,需要进行相应处理。 - **集群创建异常处理**:若创建过程中出现问题,需根据具体错误信息进行排查和修复,如检查网络连接、配置文件是否正确等 [^1]。 ### 4. 验证和测试 - **数据测试**:通过 `redis-cli` 连接到集群中的一个节点,进行数据的读写操作,验证集群是否正常工作。 - **集群上下线测试**:模拟节点的上线和下线操作,检查集群的容错能力和数据迁移情况 [^1]。 ### 5. 部署总结 完成上述步骤后,对整个部署过程进行总结,检查是否达到预期效果,如有需要可进行调整和优化 [^1]。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值