DataWorks 迁移助手核心能力任务上云具体指什么?
任务上云,是指将自建的开源调度引擎上面的作业快速搬站上云,主要支持的调度 引擎为 Oozie、Azkaban、Airflow 等。目前能够迁移的节点类型主要是 Sqoop 节点、 Shell 节点和 Hive 节点,可以将这些节点转化成为 DataWorks 上的 MaxCompute 任务, 或者是 EMR 任务。比如一个 Hive 作业,导入到 DataWorks 上的时候,其实可以选择将 这个 Hive 作业转化为 MaxCompute SQL 作业,或者是转化为 EMR 的 Hive 作业。
以上内容摘自《一站式大数据开发治理DataWorks使用宝典》电子书,点击https://developer.aliyun.com/ebook/download/411可下载完整版
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。