elasticsearch使用2：使用Logstash7.1.1同步MySql数据到ES

最新推荐文章于 2025-03-07 14:34:07 发布

卫辰N

最新推荐文章于 2025-03-07 14:34:07 发布

阅读量3.8k

点赞数

分类专栏： elasticsearch 文章标签： elasticsearch java mysql 同步表数据 logstash

本文链接：https://blog.youkuaiyun.com/qq_43229020/article/details/93199070

版权

本文介绍了如何使用Logstash7.1.1将MySQL数据库中的数据同步到Elasticsearch。首先，下载并部署Logstash，创建名为mysql.conf的配置文件，并设置必要的连接参数如jdbc_connection_string、jdbc_user等。启动Logstash时指定配置文件。在实际操作中可能遇到数据库连接问题，解决方案包括检查配置文件、查看日志或重新创建配置文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.准备工作
下载Logstash：https://www.elastic.co/products/logstash
2.安装部署
下载完成后解压，之后在config文件夹中创建mysql.conf
文件名可修改，启动的时候修改成对应的脚本命令就行
打开刚创建的文件加入以下代码（已经确定7版本以上取消了type，所以我没加type）

input {
	stdin {}
	jdbc{
		jdbc_connection_string => "jdbc:mysql://localhost:3306/spring"

		jdbc_user => "root"
		jdbc_password => "数据库密码"

		jdbc_driver_library => "D:\ES\logstash-7.1.1\mysql\mysql-connector-java-5.1.38-bin.jar"

		jdbc_driver_class => "com.mysql.jdbc.Driver"
		jdbc_paging_enabled => "true"
		jdbc_page_size => "50000"
		
		statement => "select * from user"
		schedule => "* * * * *"
	}
}
  
output {
	stdout {
		codec => json_lines
	}
    elasticsearch {
		hosts => &