开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks引用此节点的下游节点还需要手动一个一个修改发布吗 ?

DataWorks已发布上游节点的节点输出名称修改发布后,引用此节点的下游节点还需要手动一个一个修改发布吗 ?

展开
收起
真的很搞笑 2024-01-22 19:12:40 49 0
2 条回答
写回答
取消 提交回答
  • 如果正好依赖该输出名的话 下游需要修改发布 可以生产运维中心先看下依赖关系是否符合预期 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-01-23 08:11:08
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    不需要手动一个一个修改发布,DataWorks会自动处理上下游节点之间的依赖关系。

    在DataWorks中,当您修改了上游节点的输出名称并发布后,下游节点会自动引用更新后的输出名称,无需手动逐一修改。这是因为DataWorks在设置上下游依赖关系时,会将上游节点的输出参数作为下游节点的输入参数。一旦上游节点的输出名称发生变化,下游节点会自动映射到新的输出名称上,确保数据流的正确性。

    此外,DataWorks还提供了赋值节点的功能,可以方便地将上游节点的查询或输出结果提供给下游节点使用。在节点上下文配置中,您可以添加输出参数定义,并在下游节点中添加输入参数定义,选择引用上游节点的输出参数。这样,当上游节点的输出参数发生变化时,下游节点会自动更新引用的参数,无需手动干预。

    需要注意的是,虽然DataWorks会自动处理这些依赖关系,但在实践中,建议在修改上游节点输出名称后,仔细检查下游节点是否正确引用了新的输出名称,以避免潜在的错误。如果有必要,您也可以通过DataWorks的控制台查看节点的详细信息和日志,以确保数据处理流程的正确性。

    2024-01-22 21:33:44
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多