问题一:DataWorks业务流程可以一键全部克隆吗?
DataWorks业务流程可以一键全部克隆吗?我们的诉求是现在是天调度改成小时调度处理,但是测试环境没有自动调度的功能,所以想将所有的节点复制出来一份,直接写死成测试环境,能这样复制不?或者你们有啥其他的建议不?业务流程克隆
参考回答:
简单模式可根据图中筛选项将项目下的部分任务克隆到目标项目。
注意:
- 支持简单模式克隆到简单模式,支持简单模式克隆到标准模式
- 使用该功能请注意依赖关系。
- 只支持在同租户下的同region进行项目克隆(克隆目标工作空间的项目需要与当前简单项目在同一region)
- 跨项目克隆的节点会在本节点输出那默认加上数字,并且不能删除。
实践案例动图:
参考文档:跨项目克隆官方文档
注意:源端和目标端必须要有项目管理员或部署角色克隆才会成功,如果您目标端没有部署角色只会显示打包成功,要到克隆列表进行克隆,在目标端才会显示。
想将所有的节点复制出来一份,直接写死成测试环境----没有太理解这块,标准模式的任务期望导出到简单模式的空间吗 ,工作空间迁移备份、业务流程复用、节点复用
1.节点、元数据、数据源、资源、函数跨项目、跨region、跨主账号迁移:迁移助手
2.同项目业务流程复用:节点组
3.ODPS SQL节点复用: 创建组件
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/566916
问题二:DataWorks迁移助手迁入时导入oss文件?
DataWorks迁移助手迁入时导入oss文件?
参考回答:
当我们需要使用迁移助手迁入存储在oss-bucket上的迁移助手zip压缩包时,oss文件地址请使用oss文件的url链接
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/566913
问题三:DataWorks中es同步不能传参吗?
DataWorks中es同步不能传参吗?
参考回答:
不是的,在DataWorks中进行ES同步时,实际上是可以传参的。你可以使用ODPS SQL命令中的变量来传递参数,并将这些变量用于SQL查询语句中。在创建或编辑同步任务时,可以在“参数设置”区域中定义要使用的变量。
此外,如果你使用的是ODPS Python SDK,则可以直接将参数写入脚本代码中,以便在运行任务时使用它们。例如,您可以使用params字典来存储这些参数,然后将其作为参数传递给run_sql函数。这样就可以在执行任务时动态地控制数据同步过程了。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/566910
问题四:DataWorks指定一下 外表的 maxPt 是可行的吗?
DataWorks拷贝这个 hologres一键表数据同步 生产的script. 自己在dataworks里写一个 hologres 的任务, 指定一下 外表的 maxPt 是可行的吗? 操作是支持 , 就是这个流程合适吗
hologres 任务里面 insert xxxx from select * from 外表 where max_pt =xx 这样的操作?
参考回答:
不不 这个是建外部表 外部表应该是整张表的schema映射 我记得是没有指定建某个分区的外表之类的 ,如果需要做数据同步 或者建视图之类的 可以考虑指定分区,只要是holo语法支持就可以
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/566905
问题五:dataworks某个节点任务执行完毕,如何通过rest风格的http请求调用接口,进行通知?
dataworks某个节点任务执行完毕,如何通过rest风格的http请求调用接口,进行通知?
参考回答:
看下这个是否满足需求 https://help.aliyun.com/zh/dataworks/user-guide/create-an-http-trigger-node?spm=a2c4g.11186623.0.i1
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/566901