SpringBoot整合canal

1.修改mysql

mysql镜像采用8.2,canal镜像尽量和121保持一致
在这里插入图片描述

镜像来源

修改msql配置文件my.conf

# 配置MySQL replaction需要定义,不要和canal的slaveId重复
server_id=1

#设置binary log文件的存放地址和文件名,叫做mysql-bin
log-bin=/var/lib/mysql/mysql-bin

#指定对哪个database记录
binlog-do-db=patrol_robot_dev

# 选择ROW(行)模式
binlog-format=ROW

完整的my.cnf如下:

[mysqld]
server_id=1
log-bin=/var/lib/mysql/mysql-bin
    
##指定对哪个database记录
binlog-do-db=patrol_robot_dev

### 选择ROW(行)模式
binlog-format=ROW

skip-host-cache
skip-name-resolve
datadir=/var/lib/mysql
socket=/var/run/mysqld/mysqld.sock
secure-file-priv=/var/lib/mysql-files
user=mysql
sql_mode = "STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION"
max_allowed_packet = 512M
pid-file=/var/run/mysqld/mysqld.pid
log-error=/logs/mysql/error.log
general_log=OFF
[client]
socket=/var/run/mysqld/mysqld.sock

!includedir /etc/mysql/conf.d/

查看是否打开binlog模式

show VARIABLES LIKE 'log_bin';

查看binlog日志文件列表

show BINARY logs;

查看当前正在写入的binlog文件

show MASTER STATUS;

查看binlog格式

SHOW VARIABLES LIKE 'binlog_format';

创建canal用户

-- 创建用户 用户名:canal 密码:Canal@123456
create user 'canal'@'%' identified by 'Canal@123456';

-- 授权 *.*表示所有库
grant SELECT, REPLICATION SLAVE, REPLICATION CLIENT on *.* to 'canal'@'%';

-- 修改canal的插件
ALTER USER 'canal'@'%' IDENTIFIED WITH mysql_native_password BY 'Canal@123456';

-- 刷新权限
FLUSH PRIVILEGES;

2.安装canal

创建docker网络

#创建canal网络
docker network create canal-test

#查询创建的网络信息
docker network ls

#查询当前网络的信息
docker network inspect canal-test

拉取canal镜像并启动

docker pull canal/canal-server

docker-启动命令

docker run -p 11111:11111 --name canal \
    -e canal.destinations=test \
    -e canal.instance.master.address=mysql:3306  \
    -e canal.instance.dbUsername=canal  \
    -e canal.instance.dbPassword=Canal@123456  \
    -e canal.instance.connectionCharset=UTF-8 \
    -e canal.instance.tsdb.enable=true \
    -e canal.instance.gtidon=false  \
    -e canal.instance.filter.regex=patrol_robot_dev..*
    --network canal-test \
    --restart=always \
    -d canal/canal-server

docker-compose启动脚本

version: '3.2'
services: 
 canal:
    networks:
      basic_net:
    ports:
      - "11111:11111"
    depends_on:
      mysql:
        condition: service_healthy
    image: canal/canal-server:latest
    container_name: basic-canal
    restart: always
    privileged: true
    environment:
      - TZ=Asi
Spring Boot是一个基于Java的开发框架,而Canal是一种用于增量数据订阅和消费的开源工具。在Spring Boot整合Canal可以方便地将数据库中的变更数据同步到其他系统中。 首先,我们需要在Spring Boot项目的pom.xml文件中添加Canal的依赖。然后,在application.properties配置文件中配置Canal的相关参数,包括Canal的服务地址、用户名、密码等。 接下来,在代码中可以通过编写监听器来实现对变更数据的订阅和消费。可以使用Canal提供的Java API来连接Canal服务,并注册事件监听器,监听数据库的变更事件。当有数据变更时,Canal会将相关的事件通知到监听器中。 在监听器中,可以获取到变更操作的数据库名、表名以及具体的变更数据。通过对这些数据的处理,可以实现将变更数据同步到其他系统中的逻辑。 例如,可以在监听器中使用Spring Boot的JdbcTemplate来向其他系统发送变更数据,或者将变更数据存储到缓存中,以供其他部分使用。 整合Canal的好处是可以实现数据的实时同步,将数据库中的变更数据推送到其他系统中,从而实现数据的实时更新和共享。同时,Canal提供了丰富的API和事件监听机制,可以满足不同场景下的需求,提供灵活的数据同步方案。 总之,通过Spring Boot整合Canal可以方便地将数据库的变更数据同步到其他系统中,实现数据的实时更新和共享。这为开发实时应用和数据集成提供了便利。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值