DataWorks怎么监控上游的另一个跨账号的项目空间数据是否产出了呢?
在DataWorks中,要监控上游的另一个跨账号的项目空间数据产出情况,可以采用以下步骤:
首先确保两个项目空间之间已经建立了数据同步任务。如果还没有建立,可以在目标项目空间中创建一个数据同步任务,将源项目空间的指定目录作为输入源。
在目标项目空间的数据同步任务配置页面,找到“数据监控”选项卡。点击“添加监控”按钮,选择需要监控的数据源和输出目录。
设置监控周期,可以选择实时监控或者定时监控。实时监控会实时检查数据产出情况,定时监控可以设置检查频率。
设置监控通知。当监控到数据产出异常时,可以通过邮件、短信等方式接收通知。
保存并启动监控任务。这样,系统就会自动监控上游项目空间的数据产出情况,并在发现异常时发送通知。
在 DataWorks 中,如果您想监控上游不同项目空间的数据产出,请按照以下步骤操作:
这样就可以让您在本地项目空间中跟踪上游项目的数据变化。
上游写完后 给oss写一个标done文件 下游可以用oss对象检查节点 类似这种方式试一下https://help.aliyun.com/zh/dataworks/user-guide/oss-object-inspection-node?spm=a2c4g.11186623.0.0.5a2f70f7qZX8nb,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
在DataWorks中,可以使用任务依赖功能来监控上游项目的产出情况。以下是具体的步骤:
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。