开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

EMR如何在OSS上查看日志?

EMR如何在OSS上查看日志? 求大佬解答

展开
收起
爱吃鱼的程序员 2020-12-28 14:18:14 1020 0
1 条回答
写回答
取消 提交回答
  • https://developer.aliyun.com/profile/5yerqm5bn5yqg?spm=a2c6h.12873639.0.0.6eae304abcjaIB

    在E-MapReduce数据开发的页面,找到对应的工作流实例,单击运行记录。在运行记录区域,单击待查看工作流实例所在行的详情,在作业实例信息页面查看执行集群ID。在日志保存目录OSS://mybucket/emr/spark下,查找执行集群ID目录。在OSS://mybucket/emr/spark/clusterID/jobs目录下会按照作业的执行ID存放多个目录,每个目录下存放了这个作业的运行日志文件。

    2020-12-28 14:18:30
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
OSS运维进阶实战手册 立即下载
《OSS运维基础实战手册》 立即下载
OSS运维基础实战手册 立即下载