温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:00
数据库同步平台人大金仓增量同步到Doris支持字段增量同步,您是否在传统批处理或受限于CDC权限缺失的情况下,这位数据同步的严重延迟而烦恼?今天All data数据中台带您体验低门槛无侵入分钟及同步。先来查看同步前的原端数据情况,这里可以看到原端4个表均有数据,然后到目标端查看同步前的数据表情况,通过控制台快速查询显示4个表当前均不存在。打开数据库同步平台,先检查数据源是否能正常连接,数据源连接均为正常后打开任务管理,进行创建同步任务,先填写任务基本。
01:00
信息。下一步对原端进行设置,这里是设置将原端哪些数据表进行同步,选择数据表的字段作为增量标识,系统已经自动分析哪些字段可以作为增量标识。将选择同步的原表设置完增量字段后,下一步进行目标端配置,目标端这里设置将同步的数据写到哪个数据库中,由于同步前目标端是没有数据表的,需要选择建表并同步的模式,下一步系统会自动配置表映射关系,无需更改。检查无误后点击提交,完成创建,在列表中找到创建的同步任务,点击启动,将任务发布上限。
02:00
上线后点击执行进行同步,执行完成后点击日志可以查看同步详情。在这里可以清晰看到这次同步了多少个表,每个表多少条数据,现在返回目标端查看是否同步成功。目标端通过SQL快速查询看到已成功创建数据表和同步了数据,现在返回原表查看是否有新增数据。目标端通过SQL快速查询看到原端4个表都可增加了5条数据,进一步查看下每个表都新增了什么数据内容,这里可以看到4个表里一个新增的数据内容。
03:00
现在返回数据库同步平台,再进行一次同步,这里看到这次只同步了新增数据,打开数据源管理,查看目标端第二次同步情况,目标端用SQL语句快速搜索,可以看到4个表都添加了新增加的5条数据,这里用SQL查看目标端4个表最后同步的5条数据详情跟原表新增数据核对同步内容一致。至此,字段自增同步成功。
我来说两句