DataWorks公共数据集成资源组切换到独享数据集成资源组,如果是脚本,就直接改这里?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
在DataWorks中,将公共数据集成资源组切换到独享数据集成资源组时,如果是脚本模式配置的离线同步任务,确实需要修改脚本中的相关资源配置部分。以下是具体的操作步骤和注意事项:
在脚本模式下,离线同步任务的资源组配置通常位于脚本的setting
部分。您需要找到并修改以下字段: - resourceGroup
:将原来的公共数据集成资源组名称替换为新的独享数据集成资源组名称。
示例脚本修改如下:
{
"type": "job",
"version": "2.0",
"steps": [
{
"stepType": "datax",
"parameter": {
...
}
}
],
"setting": {
"resourceGroup": "新独享资源组名称", // 修改此处为新的独享资源组名称
"maxCU": 4 // 根据业务需求调整CU值
}
}
注意:
- 确保新独享资源组已绑定至对应的工作空间,并完成网络连通性测试。 - 如果未正确绑定或网络不通,可能导致任务无法正常运行。
在修改脚本后,必须验证新独享资源组与数据源之间的网络连通性。操作步骤如下: 1. 登录DataWorks控制台,进入目标工作空间。 2. 在左侧导航栏选择数据源,找到对应的数据源。 3. 单击数据源后的编辑按钮,在数据集成页签下选择新独享资源组,点击测试连通性。 4. 确保连通状态显示为可连通。
如果网络不通,请参考网络连通方案进行排查和修复。
完成脚本修改和网络连通性验证后,需提交并发布任务以使更改生效: 1. 在DataStudio页面中,保存修改后的脚本。 2. 提交任务至调度系统。 3. 发布任务至生产环境。
重要提醒:
- 如果任务已在生产环境中运行,建议先在开发环境中测试修改后的任务,确保其能够正常执行后再发布至生产环境。
切换资源组后,建议通过运维中心监控任务的运行情况: 1. 进入运维中心 > 周期任务页面。 2. 查看任务的运行日志,确认任务是否成功执行。 3. 如果任务失败,请检查错误日志并排查问题。
通过以上步骤,您可以顺利完成从公共数据集成资源组到独享数据集成资源组的切换。如果有任何疑问或遇到问题,可以通过工单联系阿里云技术支持团队获取帮助。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。