【数据库同步平台】Hive数据库同步到Doris 实战操作！原创

数据同步平台hi同步到Doris，支持字段增量同步。您还在为数据同步不稳定、新数据同步步骤繁琐而困扰吗？今天All data数据中台告诉您，数据同步只需要几步就可轻松搞定。本次操作演示使用科技制造业中Miss生产数据表和ERP资源计划表做演示，先查看同步前的原表，可以看到原表两个数据表都各有5条数据。现在查看目标端数据表情况，目标端通过SQL快速查询显示没有找到数据表。打开数据库同步平台，先校验数据源是否能正常连接，校验完成后打开任务管理，进行创建同步任务。

第一步，先填写任务基本信息，第二步进行源端配置，这里是设置读取源端哪些以及怎么读取。这里将需要同步的表都添加增量字段，系统以自动识别哪些可以作为增量。下一步进行目标端配置。这里是设置将数据同步到哪个库中，并且设置同步时需要建表，这里系统已自动进行表映射，无需修改，直接下一步点击提交完成创建，返回任务列表中，找到创建的任务，手动点击启动，进行发布上线，点击执行，开始同步。同步详情可以在日志中查看，在日志中可以清晰看到本次同步了多少条数据。现在返回数据源管理中校验同步结果，通过SQL快速查询看到目标端已见表并同步了数据。现在打开原表查看同步后是否有新增数据。这里看到Miss production data这个表多了10条数据。

这个表没有新增数据，现在打开数据库同步平台进行新增数据同步，这里看到第二次同步的只有新增数据，没有新增的表是没有增量数据同步的。返回目标端查看新增同步情况，刷新后显示目标端同步了新增的10条数据。

这个表没有新增数据，目标端数量保持不变。至此，字段自增同步成功。