【数据集成平台】Hive数据库全量同步至Doris 实战操作！原创

数据集成平台hive数据全量同步到Doris，您是否因为业务同步配置复杂而反复踩坑？今天All data数据中台带您体验一键轻松搞定全量同步。先来检查同步前的数据情况，原表数据是34条，目标数据库已有数据表数据是10条，由于目标库已经有数据表，在创建任务时候就不用自动建表，打开数据集成平台，进入数据同步任务管理，创建同步任务，选择原表和目标表的数据类型，这里选择要读取的hive集群。

选择绑定对应HDFS文件系统选择需要读取数据表的数据格式，这里关闭分区，设置成全量同步，选择需要读取的原表，设置原表的同步主键和同步字段列，这里选择好目标库后，下一步系统会自动进行表映射检查没问题后点击创建即可提交任务。在数据同步任务列表打开任务，进行数据同步，在这里可以更改同步设置。

在批量构建中开启同步任务，同步完成任务状态显示成功。现在返回数据源管理校验同步情况，原表数据是34条，目标表同步了一次，在原来的10条加上全量同步，原表的34条数量正确。至此，全量同步成功。