开发者社区> 问答> 正文

客户遇到了EMR Spark任务运行失败的问题,并怀疑是因为过多扫描数据导致连接心跳失败以及可...

已解决

客户遇到了EMR Spark任务运行失败的问题,并怀疑是因为过多扫描数据导致连接心跳失败以及可能存在的内存不足问题

展开
收起
提个问题! 2024-09-30 10:20:16 7 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答

    经过沟通排查,发现问题原因为spark任务由于大数据扫描引起的心跳失败,并进一步分析发现可能是堆外内存不够导致的异常。建议客户在业务低峰期执行任务或增加计算资源以解决问题。

    2024-09-30 10:20:17
    赞同 3 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载