otter

otter

https://github.com/alibaba/otter
同样是阿里巴巴开源的数据同步工具
定位: 基于数据库增量日志解析,准实时同步到本机房或异地机房的mysql/oracle数据库. 一个分布式数据库同步系统

注意:基于cannal

原理

  1. 基于Canal开源产品,获取数据库增量日志数据。 什么是Canal, 请点击

  2. 典型管理系统架构,manager(web管理)+node(工作节点)

    a. manager运行时推送同步配置到node节点

    b. node节点将同步状态反馈到manager上

  3. 基于zookeeper,解决分布式状态调度的,允许多node节点之间协同工作.

说白了 cannal拿到binlog日志以后,处理完以后, 就交给这货,这货有管理配置页面。还做了一些关于可靠性和速度的考虑。

使用

(注意如果使用docker安装的机子上有mysql,会启动不了)
参考issue https://github.com/alibaba/otter/issues/695
因此在下面提供手动安装的方式
拉docker镜像
docker pull canal/otter-all
创建otter目录
cd /usr/local
mkdir otter
进入otter目录,运行otter镜像
curl -fsSL https://raw.githubusercontent.com/alibaba/otter/master/docker/run.sh | bash

手动安装

####manager安装
https://github.com/alibaba/otter/wiki/Manager_Quickstart

  1. java环境 mysql等 初始化otter需要的表等 自行安装

  2. 使用docker启动zookeeper(otter依赖于zookeeper做集群管理)
    docker run --name otter-zookeeper -p 2181:2181 --restart always -d zookeeper

3.下载otter manager https://github.com/alibaba/otter/releases 解压缩 修改配置 然后启动 等参考官方手册md文档

node安装

https://github.com/alibaba/otter/wiki/Node_Quickstart
官方文档已经可以满足需求了

你可能感兴趣的:(数据同步)