DataWorks离线同步和实时同步支持的数据源是不是一致的?
在DataWorks中,离线同步和实时同步通常支持相同的数据源。数据源的选择主要取决于所使用的数据集成工具和节点类型。
离线同步数据源:对于离线同步任务,可以使用DataWorks提供的数据集成节点(如同步节点、数据开发节点)以及相关插件(如ODPS SQL、DataX等),支持的数据源包括但不限于:
实时同步数据源:对于实时数据同步任务,通常会使用流式计算节点和相关技术,如DataHub、Flink等。实时同步数据源也与离线同步类似,支持的数据源有重叠之处,包括但不限于:
不是一致的。
数据集成包括离线同步、实时同步和全增量同步任务三个功能模块,根据各模块对数据源的支持情况,选择对应的功能模块进行同步任务的配置。如下所示:
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。