这个时候我们可以进入logs下的userlogs
备注：userlogs目录下有很多个以往运行的作业，我选择最新的最大编号的作业，就是我们当前运行作业的日志。然后找到stderr stdout syslog文件，stderr为作业错误日志，stdout作业输出日志，syslog为系统日志
本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/7643664.html，如需转载请自行联系原作者
如果遇到Hadoop集群正常，MapReduce作业运行出现错误，如何来查看作业运行日志（图文详解）
2017-06-25
1196
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
目录
相关文章
|
3月前
|
分布式计算
Kubernetes
Hadoop
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
204
6
6
|
30天前
|
存储
数据采集
监控
阿里云DTS踩坑经验分享系列｜SLS同步至ClickHouse集群
作为强大的日志服务引擎，SLS 积累了用户海量的数据。为了实现数据的自由流通，DTS 开发了以 SLS 为源的数据同步插件。目前，该插件已经支持将数据从 SLS 同步到 ClickHouse。通过这条高效的同步链路，客户不仅能够利用 SLS 卓越的数据采集和处理能力，还能够充分发挥 ClickHouse 在数据分析和查询性能方面的优势，帮助企业显著提高数据查询速度，同时有效降低存储成本，从而在数据驱动决策和资源优化配置上取得更大成效。
128
9
9
|
1月前
|
存储
SQL
关系型数据库
【赵渝强老师】PostgreSQL的运行日志文件
PostgreSQL的物理存储结构包括数据文件、日志文件等。运行日志默认未开启，需配置`postgresql.conf`文件中的相关参数如`log_destination`、`log_directory`等，以记录数据库状态、错误信息等。示例配置中启用了CSV格式日志，便于管理和分析。通过创建表操作，可查看生成的日志文件，了解具体日志内容。
46
3
3
|
1月前
|
存储
Prometheus
监控
Docker容器内进行应用调试与故障排除的方法与技巧，包括使用日志、进入容器检查、利用监控工具及检查配置等，旨在帮助用户有效应对应用部署中的挑战，确保应用稳定运行
本文深入探讨了在Docker容器内进行应用调试与故障排除的方法与技巧，包括使用日志、进入容器检查、利用监控工具及检查配置等，旨在帮助用户有效应对应用部署中的挑战，确保应用稳定运行。
41
5
5
|
3月前
|
Arthas
监控
Java
JVM知识体系学习七：了解JVM常用命令行参数、GC日志详解、调优三大方面（JVM规划和预调优、优化JVM环境、JVM运行出现的各种问题）、Arthas
这篇文章全面介绍了JVM的命令行参数、GC日志分析以及性能调优的各个方面，包括监控工具使用和实际案例分析。
87
3
3
|
3月前
|
分布式计算
Hadoop
Shell
Hadoop-35 HBase 集群配置和启动 3节点云服务器 集群效果测试 Shell测试
Hadoop-35 HBase 集群配置和启动 3节点云服务器 集群效果测试 Shell测试
93
4
4
|
3月前
|
SQL
分布式计算
Hadoop
Hadoop-37 HBase集群 JavaAPI 操作3台云服务器 POM 实现增删改查调用操作 列族信息 扫描全表
Hadoop-37 HBase集群 JavaAPI 操作3台云服务器 POM 实现增删改查调用操作 列族信息 扫描全表
45
3
3
|
3月前
|
分布式计算
Hadoop
Shell
Hadoop-36 HBase 3节点云服务器集群 HBase Shell 增删改查 全程多图详细 列族 row key value filter
Hadoop-36 HBase 3节点云服务器集群 HBase Shell 增删改查 全程多图详细 列族 row key value filter
67
3
3
|
3月前
|
分布式计算
Java
Hadoop
Hadoop-30 ZooKeeper集群 JavaAPI 客户端 POM Java操作ZK 监听节点 监听数据变化 创建节点 删除节点
Hadoop-30 ZooKeeper集群 JavaAPI 客户端 POM Java操作ZK 监听节点 监听数据变化 创建节点 删除节点
81
1
1
|
3月前
|
分布式计算
监控
Hadoop
Hadoop-29 ZooKeeper集群 Watcher机制 工作原理 与 ZK基本命令 测试集群效果 3台公网云服务器
Hadoop-29 ZooKeeper集群 Watcher机制 工作原理 与 ZK基本命令 测试集群效果 3台公网云服务器
54
1
1
热门文章
最新文章
1
一行代码都不改，Golang 应用链路指标日志全知道
2
阿里云DTS踩坑经验分享系列｜SLS同步至ClickHouse集群
3
一行代码改进：Logtail的多行日志采集性能提升7倍的奥秘
4
写了BUG还想跑——闲鱼异常日志问题自动追踪-定位-分发机制
5
Python脚本：自动化下载视频的日志记录
6
MySQL进阶突击系列(02)一条更新SQL执行过程 | 讲透undoLog、redoLog、binLog日志三宝
7
云上数据安全保护：敏感日志扫描与脱敏实践详解
8
【赵渝强老师】PostgreSQL的服务器日志文件
9
3D-Speaker：阿里通义开源的多模态说话人识别项目，支持说话人识别、语种识别、多模态识别、说话人重叠检测和日志记录
10
要统计Nginx的客户端IP，可以通过分析Nginx的访问日志文件来实现
1
java与大数据：Hadoop与MapReduce
69
2
数据分享|Python、Spark SQL、MapReduce决策树、回归对车祸发生率影响因素可视化分析
102
3
DataWorks产品使用合集之在DataWorks中，在MapReduce作业中指定两个表的所有分区如何解决
97
4
【Hive】所有的Hive任务都会有MapReduce的执行吗？
471
5
【Hive】Hive的两张表关联，使用MapReduce怎么实现？
360
6
面经：MapReduce编程模型与优化策略详解
163
7
Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
335
8
【底层服务/编程功底系列】「大数据算法体系」带你深入分析MapReduce算法 — Shuffle的执行过程
110
9
bigdata-08-MapReduce原理到实战
89
10
阿里云E-MapReduce Trino专属集群外连引擎及权限控制踩坑实践
470