背景
在以下场景下会用到不同数据库的实时同步问题,比如:数据备份与容灾、多地域数据同步、数据共享与协作、数据分析与报表生成、实时监控与报警系统等等。大多数情况用到的就是数据备份了吧,相同的数据库还好,不同的数据库不能完全兼容就很麻烦,所以会用到SymmetricDS、Maxwell、Debezium、Kettle和ETLCloud
接下来用一个实例来看看,如何实现ETLCloud的实时同步。
案例演示
1.填写主要信息
2.接收配置
3.选择要同步到的数据库
4.选择目标表,字段名自动读取
高级映射这边选择全量+增量。全量+增量就是第一次启动的时候就把原来的数据全部同步过去,然后源数据库修改的话,目标表也跟着修改。增量就只有改了源数据库,才会同步到目标库。
5.配置完之后保存
6.启动监听器
接下来我们就开始同步,源数据库的数据
目标表
监听器启动后,目标表这边就已经有数据了
在源数据表插入一条数据
目标表数据
最后
在日常数据处理上,可以选择工作效率高的工具,ETLCloud是一款全域数据集成工具,专门设计用于解决企业复杂的数据集成的挑战。可以实现实时数据同步、离线数据处理、流程全面监控于一体的国产数据集成平台,相比其他国外ETL工具有着更易上手的特点。
可视化操作流程界面
多种数据源库