DataWorks数据集成在离线同步场景下支持各种类型和网络环境下的数据同步，包括数据库、数仓、NoSQL数据库、文件存储、消息队列等近50多种不同异构数据源之间的数据同步。当源库或目标库是MC时，DataWorks离线数据集成会通过DataX这个阿里云 DataWorks数据集成的开源版本来进行数据的读取和写入。DataX被广泛应用于阿里巴巴集团内，实现了多种异构数据源之间高效的数据同步功能。因此，源库或目标库是MC时，走的是DataX而非Tunnel。
dataworks离线数据集成，源库或目标库是MC时，走的是Tunnel？ 还是走的是datax啊?
2023-12-25
138
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
dataworks离线数据集成，源库或目标库是MC时，走的是Tunnel？ 还是走的是datax啊?
目录
相关文章
|
19天前
|
数据采集
DataWorks
数据管理
DataWorks不是Excel，它是一个数据集成和数据管理平台
【10月更文挑战第10天】随着大数据技术的发展，企业对数据处理的需求日益增长。阿里云推出的DataWorks是一款强大的数据集成和管理平台，提供从数据采集、清洗、加工到应用的一站式解决方案。本文通过电商平台案例，详细介绍了DataWorks的核心功能和优势，展示了如何高效处理大规模数据，帮助企业挖掘数据价值。
65
1
1
|
24天前
|
数据采集
SQL
DataWorks
DataWorks不是Excel，它是一个数据集成和数据管理平台
【10月更文挑战第5天】本文通过一家电商平台的案例，详细介绍了阿里云DataWorks在数据处理全流程中的应用。从多源数据采集、清洗加工到分析可视化，DataWorks提供了强大的一站式解决方案，显著提升了数据分析效率和质量。通过具体SQL示例，展示了如何构建高效的数据处理流程，突显了DataWorks相较于传统工具如Excel的优势，为企业决策提供了有力支持。
71
3
3
|
2月前
|
存储
分布式计算
DataWorks
|
2月前
|
机器学习/深度学习
DataWorks
数据挖掘
|
3月前
|
DataWorks
Kubernetes
大数据
|
3月前
|
SQL
DataWorks
安全
DataWorks产品使用合集之如何实现分钟级调度
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
87
5
5
|
3月前
|
运维
DataWorks
监控
DataWorks产品使用合集之如何自定义UDTF
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
121
3
3
|
3月前
|
分布式计算
DataWorks
API
DataWorks产品使用合集之如何设置把结果传入变量
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
83
3
3
|
3月前
|
DataWorks
安全
定位技术
DataWorks产品使用合集之怎么指定任务的执行时间
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
67
1
1
|
3月前
|
DataWorks
监控
Java
DataWorks产品使用合集之怎么查看并发数和jvm对应值
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
64
0
0
热门文章
最新文章
1
转载《Data Lake Analytics: 使用DataWorks来调度任务》
2
DataWorks独享资源组开通、使用教程
3
ODPS到ADS数据迁移指南
4
PyODPS 中使用 Python UDF
5
基于pyodps对MaxComputer表的数据探查
6
数据治理中 PyODPS 的正确使用方式
7
DataWorks 2021-06 产品月刊
8
DataWorks百问百答01：数据同步该用什么资源组？
9
DataWorks常见问题之如何迁移业务流程到其他项目
10
DataWorks数据源问题之同步任务脚本如何解决
1
阿里DataX极简教程
684
2
DataWorks操作报错合集之DataWorks使用数据集成整库全增量同步oceanbase数据到odps的时候，遇到报错，该怎么处理
88
3
DataWorks操作报错合集之在DataWorks数据集成中，但是预览ODPS源数据库为空，是什么导致的
93
4
DataWorks产品使用合集之DataWorks 数据集成中的数据源管理和管理空间的数据源之间的关系是怎样的
94
5
DataWorks产品使用合集之在DataWorks中，查看ODPS表的OSS对象如何解决
85
6
DataWorks产品使用合集之在DataWorks中，将数据集成功能将AnalyticDB for MySQL中的数据实时同步到MaxCompute中如何解决
95
7
DataWorks产品使用合集之在 DataWorks 中使用数据集成从 MySQL 导入数据到 GDB 执行同步任务脚本的步骤如何解决
66
8
DataWorks产品使用合集之在使用 DataWorks 数据集成同步 PostgreSQL 数据库中的 Geometry 类型数据如何解决
86
9
DataWorks产品使用合集之DataWorks 数据集成任务中，将数据同步到 Elasticsearch（ES）中，并指定 NESTED 字段中的 properties 类型如何解决
81
10
DataWorks产品使用合集之DataWorks 数据集成在同步任务中实现数据转换如何解决
81