数据库实时同步方案

目录

一 原理

二 配置

三 扩展

四 运维

---

一 原理

Beedup采用数据库逻辑复制技术，通过实时解析主库日志还原执行的DML及DDL并按照事务单元重新在从库执行，实现主从库的数据完全一致。目前支持Oracle、SQL Server、DB2、MySQL、PostgreSQL等数据库实时同步。

二 配置

采用Beedup实现数据同步，主库必须开启归档日志，主库连接用户需授予读取日志及系统字典的权限。

Beedup采用JDBC连接主库及从库，软件配置十分简单，默认指定主库及从库的连接参数即可。复制任务启动后，自动设置当前主库时间为日志捕获起点并开始同步历史数据，历史数据同步结束后从捕获起点开始解析同步日志中的DML及DDL操作。

三 扩展

Beedup提供数据库审计功能，实时跟踪记录主表数据变化，审计信息包含变化时间戳，用户代码，操作类型等。审计信息既可细粒度观察主库数据变化轨迹，实现数据操作回溯，也可用于CDC（变化数据捕获），作为实时数据采集的入口点。

四 运维

Beedup提供任务调度界面，支持多个任务的并发运行，可以限制最大运行任务数，支持任务排队机制。调度界面同时显示以下任务信息，复制到从库的DML（按照INSERT、UPDATE、DELETE分类）及DDL总记录数、增量复制的DML总字节数。

Beedup提供详细的运行日志输出，包含事务复制时间、事务对应DDL及DML（INSERT、DELETE和UPDATE）的产生时间及执行用户，DML对应的表等信息。

Beedup提供复制数据统计功能，可了解最近10日数据库操作情况，基于流量及DML操作了解数据库中排名前10的表。