ElasticSearch与MYSQL数据同步三种方案

系统管理员 2023-10-07 20:25 12阅读 0赞

## 什么是数据同步？ ##

elasticsearch中的酒店数据来自于mysql数据库，因此mysql数据发生改变时，elasticsearch也必须跟着改变，这个就是elasticsearch与mysql之间的**数据同步**。

--------------------

## 思路分析 ##

常见的数据同步方案有三种：

*  同步调用
 *  异步通知
 *  监听binlog

## 方案一：同步调用 ##

![06b32412ef854a7298bee5fb022f2815.png][]

基本步骤如下：

*  hotel-demo对外提供接口，用来修改elasticsearch中的数据
 *  酒店管理服务在完成数据库操作后，直接调用hotel-demo提供的接口

## 方案二：异步通知 ##

![9992cc67552f43a5b771a8464da25c2b.png][]

流程如下：

*  hotel-admin对mysql数据库数据完成增、删、改后，发送MQ消息
 *  hotel-demo监听MQ，接收到消息后完成elasticsearch数据修改

## 方案三：监听binlog ##

![406f7a63b81e46e2bc536fcfd6e1875f.png][]

流程如下：

*  给mysql开启binlog功能
 *  mysql完成增、删、改操作都会记录在binlog中
 *  hotel-demo基于canal监听binlog变化，实时更新elasticsearch中的内容

## 如何选择？ ##

方式一：同步调用

*  优点：实现简单，粗暴
 *  缺点：业务耦合度高

方式二：异步通知

*  优点：低耦合，实现难度一般
 *  缺点：依赖mq的可靠性

方式三：监听binlog

*  优点：完全解除服务间耦合
 *  缺点：开启binlog增加数据库负担、实现复杂度高

[06b32412ef854a7298bee5fb022f2815.png]: https://img-blog.csdnimg.cn/06b32412ef854a7298bee5fb022f2815.png
[9992cc67552f43a5b771a8464da25c2b.png]: https://img-blog.csdnimg.cn/9992cc67552f43a5b771a8464da25c2b.png
[406f7a63b81e46e2bc536fcfd6e1875f.png]: https://img-blog.csdnimg.cn/406f7a63b81e46e2bc536fcfd6e1875f.png

发表评论取消回复

表情：

评论列表（有 0 条评论，12人围观）

还没有评论，来说两句吧...

相关阅读

相关 ElasticSearch 同步MySQL数据方案汇总

叙述在实际项目开发中，我们经常将Mysql作为业务数据库，ES作为查询数据库，用来实现读写分离，缓解Mysql数据库的查询压力，应对海量数据的复杂查询。这其中有一个很重

ゝ一世哀愁。/ 2024年03月22日 17:33/ 0 赞/ 113 阅读

相关 ElasticSearch数据的同步方案

一、方案背景当订单数据量规模足够大或查询统计足够复杂时，通常会采用MySQL + NoSQL的架构方案，这种方案需要将MySQL中数据同步到其它介质，比如Click

迈不过友情╰/ 2024年03月17日 22:31/ 0 赞/ 161 阅读

相关【ElasticSearch】ES与MySQL数据同步方案及Java实现

文章目录一、同步实现思路 1、方案一：同步调用 2、方案二：异步通知 3、方案三：监听binlog 二、实现ES与M

亦凉/ 2023年10月13日 16:21/ 0 赞/ 33 阅读

相关 ElasticSearch与MYSQL数据同步三种方案

什么是数据同步？ elasticsearch中的酒店数据来自于mysql数据库，因此mysql数据发生改变时，elasticsearch也必须跟着改变，这个就是elast

系统管理员/ 2023年10月07日 20:25/ 0 赞/ 13 阅读

相关 Mysql 数据同步到 Elasticsearch

阅读目录说明 1 同步原理 2 插件 logstash-input-jdbc go-mysql-elasticsearch

梦里梦外;/ 2023年10月06日 20:17/ 0 赞/ 95 阅读

相关 elasticsearch与mysql数据同步

目录数据同步一.思路分析 1.同步调用 2.异步通知 3.监听binlog

忘是亡心i/ 2023年09月25日 18:22/ 0 赞/ 107 阅读

相关 elasticsearch logstash同步mysql数据到elasticsearch

-------------------- elasticsearch logstash同步mysql数据到elasticsearch \\\\\\\\\\\\\

绝地灬酷狼/ 2023年06月29日 05:54/ 0 赞/ 53 阅读

相关 ElasticSearch--与MySQL同步

原文网址：[ElasticSearch--与MySQL同步\_IT利刃出鞘的博客-CSDN博客\_elasticsearch与mysql同步][ElasticSearch--_

左手的ㄟ右手/ 2022年10月18日 01:00/ 0 赞/ 181 阅读

相关 Elasticsearch增量同步Mysql数据

首先安装Elasticsearch，参考[https://blog.csdn.net/letterss/article/details/91361205][https_blog

电玩女神/ 2021年11月23日 08:54/ 0 赞/ 454 阅读

相关 elasticsearch与MySQL数据同步

1:Logstash 1.1:什么是Logstash Logstash是一款轻量级的日志搜集处理框架，可以方便的把分散的、多样化的日志搜集起来，并进行自定义的处理，然后传

逃离我推掉我的手/ 2021年11月09日 08:22/ 0 赞/ 450 阅读