Docker之部署Canal

文章介绍了如何利用Canal这个开源工具进行MySQL的数据同步,首先确保MySQL开启binlog并设置为ROW模式,然后创建Canal所需的授权用户。接着,通过Docker部署Canal服务器,拉取镜像,挂载配置文件,修改并重新启动容器。最后,开放端口以实现服务对外提供。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Canal 就是一个同步增量数据的一个工具。

概念

canal是阿里巴巴旗下的一款开源项目,纯Java开发。基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了MySQL(也支持mariaDB)

Mysql开启binlog

在部署Canal之前,需要先安装Mysql。

我用的是5.7.27的mysql

是否开启binlog

输入以下命令,查看是否开启binlog
OFF则表示未开启binlog

show variables like 'log_bin';

在这里插入图片描述

开启binlog日志

修改mysql的配置文件,在[mysqld]下添加以下内容

# server_id不重复即可,不要和canal的slaveId重复
server_id=1
# 开启binlog
log_bin = mysql-bin
# 选择row模式
binlog_format = ROW

修改完毕,重启mysql
查看是否开启
在这里插入图片描述

创建授权用户

创建授权用户canal用于cannal服务监听mysql的binlog

# 新建用户 用户名:canal  密码:canal 
CREATE USER canal IDENTIFIED by 'canal';
# 授权
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
# 刷新MySQL的系统权限相关表
FLUSH PRIVILEGES;

部署Canal

如果没有部署过docker,看我之前写的Linux部署Docker

拉取镜像

docker pull canal/canal-server:latest

挂载properties配置文件

先进行第一次运行,拷贝properties配置文件

docker run -p 11111:11111 --name canal -d canal/canal-server:latest

拷贝运行后的容器中配置文件,用来文件挂载

# 创建canal宿主机挂载目录
mkdir -p /opt/canal/conf
# 查看docker运行情况,复制容器id
docker ps
# 拷贝配置文件
docker cp 容器id:/home/admin/canal-server/conf/example/instance.properties  /opt/canal/conf/

移除当前容器

docker stop canal
docker rm canal

修改配置文件
在这里插入图片描述

创建容器

运行新的容器,同时挂载修改后的配置文件

docker run -p 11111:11111 --name canal -v /opt/canal/conf/instance.properties:/home/admin/canal-server/conf/example/instance.properties -d canal/canal-server:latest

开放端口

firewall-cmd --zone=public --add-port=11111/tcp --permanent && firewall-cmd --reload
### 使用 Docker 部署 Canal 的方法 #### 准备工作 为了成功使用 Docker 安装并运行 Canal,需先确保已正确安装 DockerDocker Compose。这可以通过官方文档获取指导[^1]。 #### 下载镜像 通过执行 `docker pull` 命令来下载所需的 Canal 镜像: ```bash docker pull hub.c.163.com/public/canal-server:latest ``` #### 创建配置文件夹 创建用于存储 Canal 配置及相关日志的目录结构,例如 `/opt/canal/configs` 及其子文件夹。这些位置将被映射至容器内部相应路径下以便于管理和维护[^2]。 #### 编写启动脚本或 Docker Compose 文件 编写一个简单的 Shell 脚本来简化 Canal 实例化过程或者利用更灵活方便的方式——Docker Compose 来定义服务组合: 对于单个命令行方式可以如下操作: ```bash docker run -d \ --name canal \ -p 11111:11111 \ -v /opt/canal/logs:/data/logs \ hub.c.163.com/public/canal-server:latest ``` 而采用 YAML 格式的 Docker Compose 则更为直观易懂: ```yaml version: '3' services: canal: image: hub.c.163.com/public/canal-server:latest container_name: canal ports: - "11111:11111" volumes: - /opt/canal/logs:/data/logs ``` #### 修改 Canal 参数设置 依据实际需求调整 Canal 的参数设定,在此之前建议深入了解各个选项的意义及其影响范围。通常情况下修改后的配置应放置在前述提到过的外部共享卷中以供持久保存和便捷访问[^3]。 #### 启动与验证 完成上述准备工作之后即可尝试首次启动 Canal 并检查是否正常运作;如果遇到任何异常情况,则参照相关指南排查可能存在的问题所在[^4]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值