开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks里面数据集成的实时同步不支持开发环境的同步么?只能启动生产任务?

dataworks里面数据集成的实时同步不支持开发环境的同步么?只能启动生产任务?

展开
收起
真的很搞笑 2023-11-07 08:47:02 40 0
4 条回答
写回答
取消 提交回答
  • 对的 仅支持生产实时同步,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-11-07 22:08:20
    赞同 展开评论 打赏
  • 实时同步不支持在数据开发界面运行任务,您需要保存、提交实时同步节点后,在生产环境运维中心运行该节点。
    实时同步仅支持运行在独享数据集成资源组上,详情请参见独享数据集成资源组。
    实时同步任务不支持同步视图。

    https://help.aliyun.com/zh/dataworks/user-guide/overview-of-the-real-time-synchronization-feature?spm=a2c4g.11186623.0.i162

    2023-11-07 14:19:31
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks 数据集成的实时同步任务是支持在开发环境运行的,但是需要注意的是,实时同步任务的目标通常是一个生产环境的数据库。也就是说,当您在 DataWorks 开发环境中运行实时同步任务时,实际上是将数据从一个源数据库同步到一个目标数据库。
    因此,在实际使用过程中,您需要确保您的源数据库和目标数据库都已经正确配置,以确保数据的安全和准确性。您还应该定期检查源数据库和目标数据库之间的数据一致性,以防止数据丢失或数据错误。
    另外,您也可以使用 DataWorks 的数据同步功能来测试实时同步任务,以确保任务在生产环境中可以正常运行。测试时,您可以将源数据库和目标数据库都设置为同一个开发环境中的数据库,以模拟生产环境的情况。

    2023-11-07 10:55:06
    赞同 展开评论 打赏
  • DataWorks的实时同步功能可以将源端数据库中部分或全部表的数据变化实时同步至目标数据库中,实现目标库与源库的数据对应。然而,该功能在数据开发界面无法直接运行任务。您需要先保存并提交实时同步节点,然后在生产环境运维中心运行该节点。

    对于开发环境的同步需求,一种常见的做法是将开发和生产环境进行隔离,让开发环境用于数据同步测试,而生产环境则用于处理生产数据的同步。这样既可以满足开发环境的实时同步需求,又能保证生产数据的准确性。

    同时,创建实时同步节点的过程也相对直接。您可以通过展开业务流程,右键单击 "数据集成" > "新建节点" > "实时同步" 的方式来创建实时同步节点。

    值得注意的是,实时同步任务仅支持运行在独享数据集成资源组上。此外,除迪拜、英国(伦敦)、马来西亚(吉隆坡)地域外,其余地域均已开通实时同步能力。因此,在使用实时同步功能时,还需要考虑到地域因素。

    2023-11-07 09:03:09
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    Flink CDC:新一代数据集成框架 立即下载
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    《DataWorks 数据集成实时同步》 立即下载

    相关实验场景

    更多