win7-mysql-es-binlog同步_es binlog-优快云博客

本文链接：https://blog.youkuaiyun.com/qq_42475721/article/details/102680348

本文档详细介绍了如何在Windows上设置MySQL到ElasticSearch的binlog同步，包括MySQL的安装、ElasticSearch 5.6.16的配置与启动、IK分词器的安装与测试，以及Canal的安装和配置，通过Canal实时捕获MySQL的binlog并同步到ElasticSearch。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

版本：
mysql：5.7.28
es：5.6.16（注：6.x以上版本不支持–type–）
ik分词工具：5.5.16
kibana：5.6.16（es对应版本）
canal： 1.1.5

安装

1.1 mysql安装教程：https://mp.youkuaiyun.com/mdeditor/102587078#

1.2 es安装教程：
1. 2.1 安装1.8及更高版本jdk
ElasticSearch 5.x 往后依赖于JDK 1.8的，所以现在我们下载JDK 1.8或者更高版本。下载JDK1.8,下载完成后安装。
1.2.2 es 下载https://www.elastic.co/cn/downloads/elasticsearch，点里面的past releases.
1.2.3 解压后点击bin目录里的elasticsearch.bat
在这里插入图片描述
看到started，说明启动成成功
浏览器打开http://localhost:9200 会显示如下信息

1.2.4 cmd 进入bin目录下执行: elasticsearch-service.bat install

1.3 kibana安装：
1.3.1 下载：https://www.elastic.co/downloads/kibana
1.3.2 解压后进入bin目录，双击kibana.bat
1.3.3 访问：http://localhost:5601

在这里插入图片描述
1.4 ik安装：
1.4.1 官方github链接：https://github.com/medcl/elasticsearch-analysis-ik
1.4.2 6.x版本以下建议在线安装：
cmd cd 到 es/bin 目录下

elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v5.6.16/elasticsearch-analysis-ik-5.6.16.zip

1.4.3 ik分词测试
ik 支持两种分词模式：ik_smart , ik_max_word
kibana端测试：

GET _analyze
{
   
  "analyzer": "ik_smart",
  "text":"中华人民共和国国歌"
}

在这里插入图片描述

1.5 canal 安装
1.5.1 mysql开启binlog
在mysql安装目录中的my.ini最后添加

log-bin=mysql-bin # 开启 binlog
binlog-format=ROW # 选择 ROW 模式
server_id=1 # 配置 MySQL replaction 需要定义，不要和 canal 的 slaveId 重复

1.5.2 授权 canal 链接 MySQL 账号具有作为 MySQL slave 的权限, 如果已有账户可直接 grant

CREATE USER canal IDENTIFIED BY 'canal';  
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
-- GRANT ALL PRIVILEGES ON *.* TO 'canal'@'%' ;
FLUSH PRIVILEGES;

1.5.3 配置修改（这一步我没做，直接默认配置）
目录 conf/example/instance.properties

canal.instance.master.address=127.0.0.1:3306
canal.instance.master.journal.name=
canal.instance.master.position=
canal.instance.master.timestamp=
canal.instance.master.gtid=

# rds oss binlog
canal.instance.rds.accesskey=
canal