温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:00
数据集成平台人大金仓数据增量同步到Doris您还在为手动导入数据效率低易出错而烦恼?All data数据中台助您快速实现增量同步,让数据真正火起来,同步前进行源端数据情况查看是否有新增数据。当前数据表刷新前是6条数据,点击刷新后显示新增了数据12条,通过控制台进行精确查询新增的数量,这里看到最新的是5月18日新增的8条数据,这8条数据需要作为增量同步到Doris,现在查看同步前目标。
01:00
高端数据情况,在目标端没有该数据表创建时需要进行全量同步并自动建表。目标端已有这个数据表,并由以前同步的6条数据前往数据集成平台创建多表增量同步任务,选择原端和目标端数据类型,选择源端数据库,选择需要同步的源端数据表,点击批量设置,系统会自动设置成全量同步,需要只同步某个表里某部分数据,可以单独对该表进行设置。这个数据表是需要全量同步并自动建表,这里只需要设置主键和同步列勾。
02:00
卷不设置过滤条件,就是全量同步,这里已有数据表需要同步新增部分数据,这里添加过滤条件只同步日期字段是5月18日的数据,如果需要同步多天,如5月17~18日的数据,可以更改成这样。目标端设置选择数据库并开启自动建表,下一步系统会自动映射表关系,然后点击创建提交即可。在管理中可以修改设置。在批量构建中开启同步任务状态,显示成功,同步已完成。现在返回数据源管理中查看目标端同步情况。
03:00
在目标端刷新数据表,这个数据表已成功在目标端键表并全量同步数据,这个表同步了原表的8条新数据,数量正确。至此,多表增量同步成功。
我来说两句