开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks怎么监控上游的另一个跨账号的项目空间数据是否产出了呢?

DataWorks怎么监控上游的另一个跨账号的项目空间数据是否产出了呢?

展开
收起
真的很搞笑 2023-11-13 12:05:08 63 0
4 条回答
写回答
取消 提交回答
  • 在DataWorks中,要监控上游的另一个跨账号的项目空间数据产出情况,可以采用以下步骤:

    1. 首先确保两个项目空间之间已经建立了数据同步任务。如果还没有建立,可以在目标项目空间中创建一个数据同步任务,将源项目空间的指定目录作为输入源。

    2. 在目标项目空间的数据同步任务配置页面,找到“数据监控”选项卡。点击“添加监控”按钮,选择需要监控的数据源和输出目录。

    3. 设置监控周期,可以选择实时监控或者定时监控。实时监控会实时检查数据产出情况,定时监控可以设置检查频率。

    4. 设置监控通知。当监控到数据产出异常时,可以通过邮件、短信等方式接收通知。

    5. 保存并启动监控任务。这样,系统就会自动监控上游项目空间的数据产出情况,并在发现异常时发送通知。

    2023-11-30 16:22:50
    赞同 展开评论 打赏
  • 在 DataWorks 中,如果您想监控上游不同项目空间的数据产出,请按照以下步骤操作:

    1. 克隆上游项目:从项目空间克隆上游项目并将其导入至本地项目。
    2. 创建触发器:在本地项目中设置定时任务,以便定期从上游项目抓取数据。
    3. 监控数据流:您可以从上游项目的触发器监控数据流的变化,并通过同步任务将更新的数据同步至本地项目空间。
    4. 审核产出:监控上游项目空间的数据变化,并审核产出结果。

    这样就可以让您在本地项目空间中跟踪上游项目的数据变化。

    2023-11-13 21:55:05
    赞同 展开评论 打赏
  • 2023-11-13 16:23:24
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,可以使用任务依赖功能来监控上游项目的产出情况。以下是具体的步骤:

    1. 在DataWorks控制台中打开相关的工作流;
    2. 查看工作流中上游项目的任务及其产出;
    3. 检查上游项目的输出结果,以及对应的产出数据集;
    4. 确定上游项目是否已产生正确的结果,并根据实际情况采取措施。
    2023-11-13 13:27:54
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多