DataWorks概述实时同步简介是什么?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
数据集成的实时同步包括实时读取、转换和写入三种基础插件,各插件之间通过内部定义的中间数据格式进行交互。一个实时同步任务支持多个转换插件进行数据清洗,并支持多个写入插件实现多路输出功能。同时针对某些场景,支持整库实时同步解决方案,您可以一次性实时同步多个表。详情请参见实时数据同步。
https://help.aliyun.com/document_detail/137663.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks 实时同步是一种将源端数据库中的部分或全部表的数据变化实时同步至目标数据库中的功能。在 DataWorks 中,实时同步功能可以帮助用户实时获取数据变化,从而实现实时分析、实时监控、实时报警等功能。实时同步任务可以在 DataWorks 中创建和配置,用户可以根据自己的需求设置实时同步的策略和参数。实时同步功能支持多种数据源,包括关系型数据库、NoSQL 数据库、文件系统等,支持多种数据目标,包括关系型数据库、NoSQL 数据库、文件系统等。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。