生产环境实践:Cana实现MySQL到ES实时同步

注:由于文章篇幅有限,获取资料可直接扫二维码!

大数据技术交流QQ群:207540827

生产环境实践:Cana实现MySQL到ES实时同步_第1张图片

速点链接加入高手战队:http://www.dajiangtai.com/course/112.do

生产环境实践:Cana实现MySQL到ES实时同步_第2张图片

注:Canal必备基础及安装部署,详看完整文档,以下直接摘取干货分享。

实现MySQL-->Canal-Server(Instance)--->ClientAdapter--->ES同步流程

所涉及组件的关系(如下)

生产环境实践:Cana实现MySQL到ES实时同步_第3张图片

相关组件的作用

生产环境实践:Cana实现MySQL到ES实时同步_第4张图片

准备业务库表

在MySQL中创建test库及test表作为业务库表,我们最终就是要同步test.test表的数据到ES:

执行如下MySQL命令:

生产环境实践:Cana实现MySQL到ES实时同步_第5张图片

配置Instance

前面安装了Canal_Server,接下来需要给Canal_Server创建Instance来拉取MySQL的binlog。

1、登录Canal_Admin

生产环境实践:Cana实现MySQL到ES实时同步_第6张图片

2、进入Instance管理页

生产环境实践:Cana实现MySQL到ES实时同步_第7张图片

3、新建Instance

点击新建Instance就会进入新建Instance配置页面:

生产环境实践:Cana实现MySQL到ES实时同步_第8张图片

4、载入Instance模板

Instance配置不需要从零开始写,先载入模板即可,如下图:

生产环境实践:Cana实现MySQL到ES实时同步_第9张图片

5、配置Instance

生产环境实践:Cana实现MySQL到ES实时同步_第10张图片

6、Instance命名

生产环境实践:Cana实现MySQL到ES实时同步_第11张图片

7、保存Instance

生产环境实践:Cana实现MySQL到ES实时同步_第12张图片

保存之后,就自动显示在Instance列表页了:

生产环境实践:Cana实现MySQL到ES实时同步_第13张图片

8、自动启动Instance

刷新Instance列表页,过一会就已经变成启动状态了:

生产环境实践:Cana实现MySQL到ES实时同步_第14张图片

至此,MySQL的binlog数据就可以被Canal-Server拉取到了。

你可能感兴趣的:(生产环境实践:Cana实现MySQL到ES实时同步)