AI 助理
备案控制台
开发者社区 问答 正文

MaxCompute spark任务如何查看节点逻辑

已解决

MaxCompute spark任务如何查看节点逻辑

展开
收起
提个问题 2024-06-12 19:13:48 43 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 社区答人
    开发者社区问答官方账号
    官方回答
    采纳回答
    如果想查看spark任务某个阶段的任务情况，可以在代码逻辑中加一些print语句，可以在spark作业打印出的log view中查看，Master以及Worker的StdErr打印的是spark引擎输出的日志，StdOut中打印用户作业输出到控制台的内容。
    2024-06-12 19:13:49 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
分布式计算 MaxCompute Spark 云原生大数据计算服务 MaxCompute
问答标签：
apache spark任务 云原生大数据计算服务 MaxCompute节点 apache spark MaxCompute 云原生大数据计算服务 MaxCompute任务 云原生大数据计算服务 MaxCompute逻辑
问答地址：
开发者社区 > 大数据 > 问答
相关问答
咨询一个大数据计算MaxCompute情况， 有两个节点A, B 上游节点为A，按日调度 B为A的
53
1
0
大数据计算MaxCompute运行节点出现这种报错？
251
2
0
在大数据计算MaxCompute中不同的节点向同一张表输出数据这个输出名和输出表名有什么影响吗？
60
1
0
阿里云maxcompute on spark 可以在硅谷节点使用吗？
34
0
0
在Spark数据处理逻辑中，如何有效减少IO成本？
18
1
0
大数据计算MaxCompute的odps节点加工扫描表的时候，源表某一张被强制过滤为空表，怎么回事？
46
0
0
大数据计算MaxCompute跑这个节点这列是有数据的，但是生产环境 这列又没有，怎么解决？
70
1
0
在大数据计算MaxCompute怎么删除这个节点？
30
1
0
ODPS mr节点访问OSS报错Caught an ClientException, whic...
76
1
0
check 节点检查大数据计算MaxCompute为什么会报这个错误？
46
1
0