ElasticSearch与MySQL数据同步

最新推荐文章于 2025-02-25 22:52:56 发布

原创最新推荐文章于 2025-02-25 22:52:56 发布 · 2.6k 阅读

CC 4.0 BY-SA版权

12 篇文章

订阅专栏

本文详细介绍了如何通过LogStash工具实现ElasticSearch与MySQL的数据同步，包括环境搭建、LogStash配置及数据同步流程。适用于希望在ElasticSearch中实时更新MySQL数据的开发者。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

ElasticSearch与MySQL数据同步

一. 环境搭建(ElasticSearch+Kibana的安装，此次使用6.3.2版本)
ElasticSearch下载地址
Kibana下载地址
在这里插入图片描述

将下载下来的文件解压，如上图，打开bin目录里面的*.bat文件即可启动

二. 启动是有条件的，先启动ElasticSearch，在启动Kibana，因为Kibana依赖于ElasticSearch
在这里插入图片描述

至此环境搭建完毕，如何实现数据同步呢?

三. LogStash工具的配合使用(版本都是6.3.2)
LogStash下载地址

安装同上，下载下来解压即可，不需要启动

3.1 放jar包，编写文件mysql.conf
在这里插入图片描述

3.2 到这儿需要先测试一下logstash看能否正常使用，需进入到logstash的bin目录下执行命令

上图这样即说明logstash没有问题

3.2 到这儿需要先测试一下logstash看能否正常使用，需进入到logstash的bin目录下执行命令

1. 安装插件
2. 测试my.conf能否正常使用
3. 验证
在这里插入图片描述

能看到查询结果即命令执行合适

在这里插入图片描述

数据已同步了，如果后期数据库有改动，需要先在WEB端Kibana下执行 DELETE /blog ,删除后重新执行 logstash -f ../config/mysql.conf文件即可

关闭时先关闭Kibana，点击右上角关闭，接着再关闭ElasticSearch即可。