使用canal增量同步mysql数据库信息到ElasticSearch

  1. 云栖社区>
  2. Java技术进阶>
  3. 博客>
  4. 正文

使用canal增量同步mysql数据库信息到ElasticSearch

dalaoyang 2019-06-22 18:13:42 浏览2425
展开阅读全文

本文介绍如何使用canal增量同步mysql数据库信息到ElasticSearch。(注意:是增量!!!)

1.简介

1.1 canal介绍

Canal是一个基于MySQL二进制日志的高性能数据同步系统。Canal广泛用于阿里巴巴集团(包括https://www.taobao.com),以提供可靠的低延迟增量数据管道,github地址:https://github.com/alibaba/canal

Canal Server能够解析MySQL binlog并订阅数据更改,而Canal Client可以实现将更改广播到任何地方,例如数据库和Apache Kafka。

它具有以下功能:

  1. 支持所有平台。
  2. 支持由Prometheus提供支持的细粒度系统监控。
  3. 支持通过不同方式解析和订阅MySQL binlog,例如通过GTID。
  4. 支持高性能,实时数据同步。

网友评论

登录后评论
0/500
评论
dalaoyang
+ 关注
所属云栖号: Java技术进阶