开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

Dataworks依赖关系为什么自动解析的父节点名会报依赖的父节点输出(表)不存在?

Dataworks依赖关系为什么自动解析的父节点名会报依赖的父节点输出(表)不存在?

展开
收起
真的很搞笑 2023-07-12 09:09:01 103 0
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在阿里云 DataWorks 中,当您在一个节点中配置依赖关系时,DataWorks 会自动解析依赖的父节点名,并根据父节点的输出信息来确定输入表的信息。如果自动解析的父节点名不正确或父节点的输出信息不符合要求,就会出现“依赖的父节点输出(表)不存在”或其他相关错误。
    具体来说,可能出现这个错误的原因有以下几种:
    父节点名不正确:在配置依赖关系时,您需要确保输入和输出的父节点名正确。如果父节点名不正确,就会出现“依赖的父节点输出(表)不存在”的错误。
    父节点输出信息不匹配:当您配置依赖关系时,DataWorks 会根据父节点的输出信息自动确定输入表的信息。如果父节点的输出信息不符合要求,就可能出现“依赖的父节点输出(表)不存在”的错误。
    依赖的父节点没有执行成功:如果依赖的父节点没有执行成功,就可能出现“依赖的父节点输出(表)不存在”的错误。
    为了解决这个问题,您可以尝试以下几种方法:
    检查父节点名:检查输入和输出的父节点名是否正确,包括大小写、拼写和特殊字符等。
    检查父节点输出信息:检查父节点的输出信息是否正确,包括输出表名、列信息和分区信息等。
    检查父节点执行状态:如果依赖的父节点没有执行成功,可以重新执行父节点,确保输出信息正确。

    2023-07-30 19:39:22
    赞同 展开评论 打赏
  • 当DataWorks自动解析依赖关系时,如果父节点的输出表在当前工作空间中不存在或者无法访问,就会报告错误,提示依赖的父节点输出(表)不存在。

    这种情况可能出现以下几种原因:

    1. 父节点是否正确配置了输出表:首先,请确保父节点正确配置了输出表,并且输出表位于当前工作空间中。如果输入表的名称或路径发生了变化,或者父节点没有正确设置输出表,则会导致依赖关系无法正常解析。

    2. 数据是否已经正确生成并提交:如果父节点是一个数据生成节点(如SQL节点),请确保该节点已经成功运行并生成了输出表。有时候,节点可能会出现异常或错误而未能正常生成数据。

    3. 权限限制导致无法访问父节点输出表:如果你是在不同的工作空间或项目中进行引用,确保你具有访问父节点输出表的权限。也要确保所使用的账号具有足够的权限来读取和写入相关表。

    4. 工作空间是否存在问题:如果以上步骤都正确配置并没有问题,那么可能是工作空间本身存在问题。可以尝试重新创建工作空间,或联系DataWorks的技术支持团队以获取更详细的帮助和解决方案。

    2023-07-12 12:03:27
    赞同 展开评论 打赏
  • 这里报错并不是说表不存在,只是没有通过表找到产出表数据的节点挂上节点依赖。出现上述情况有以下两种原因:上游节点未提交,提交后可以再次尝试。上游节点已经提交,但上游节点的输出名不是workshop_yanshi.tb_2。说明如果tb_2为同步任务产出的表,请在产出tb_2表数据的同步任务节点输出那手动以projectname.tablename的方式添加为节点输出,详情请参考文档调度依赖逻辑说明。如果tb_2为非调度节点每天更新的表,请在代码中找到表右键删除输入,再重新自动解析。非调度节点每天更新的表请参考常见问题:哪些场景下不支持设置调度依赖??
    https://help.aliyun.com/document_detail/146666.html![image.png](https://ucc.alicdn.com/pic/developer-ecology/wyvq5mjsckydw_75bd88e5b3cb48b2bdb2f2098ecd2b0b.png)
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-12 10:32:16
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关镜像