开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

根据数据集成任务ID,如何找到自定义资源组上的运行日志?

根据数据集成任务ID,如何找到自定义资源组上的运行日志?

展开
收起
滴滴滴~ 2023-03-07 16:57:55 286 0
2 条回答
写回答
取消 提交回答
  • 1.登录到ecs上。

    2.进入 /home/admin/datax3/log 目录

    3.根据数据集成的作业id查询任务详细日志命令, 这里的列子 2261156 是数据集成作业id,每次运行都不同的。 find . | grep 2261156

    4.数据集成作业id哪儿看到, 在数据集成日志里面有。

    此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-03-09 09:18:44
    赞同 展开评论 打赏
  • 随心分享,欢迎友善交流讨论:)

    根据数据集成任务ID,可以通过以下步骤找到自定义资源组上的运行日志:

    1、在DataWorks控制台上进入数据集成页面,选择对应的数据集成任务。

    2、在数据集成任务页面中,点击左侧栏的“运维中心”按钮,在弹出的菜单栏中点击“运维中心”。

    3、进入运维中心页面后,可以看到该任务的运行记录列表。找到对应的运行记录,点击运行记录右侧的“详情”按钮。

    4、在任务执行记录详情页中,点击“节点列表”选项卡,在节点列表中找到需要查看日志的节点,点击该节点右侧的“日志”按钮。

    5、在弹出的“日志”窗口中,可以看到当前节点的运行日志。如果该节点使用的是自定义资源组,可以在日志窗口的顶部选择“自定义资源组”进行过滤,即可看到该节点在自定义资源组上的运行日志。

    需要注意的是,自定义资源组上的运行日志只会在该资源组上运行的节点中生成,如果该任务使用了多个资源组,需要分别查看各个资源组上的运行日志。

    2023-03-07 17:36:00
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
Flink CDC:新一代数据集成框架 立即下载
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
《DataWorks 数据集成实时同步》 立即下载