开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

阿里云E-MapReduce中hive 任务 能有解决办法吗?

阿里云E-MapReduce中hive 任务 跑着跑着 有时候yarn 某一个 节点 就会掉了 ,然后发现该节点ssh 都连不上 ,能有解决办法吗 , Scheduler 配置的资源 32g内存 最大能用 26g?看 监控 cpu和 内存资源都没跑满,但是 该节点连不上去ssh ,如何排查呢

展开
收起
cuicuicuic 2024-02-06 08:54:32 46 0
1 条回答
写回答
取消 提交回答
  • 这个应该不是workflow导致的了,要找hdfs侧同学帮忙看下了。方便的话您直接在页面上提供单吧 cc,供单 -> 工单 ,此回答整理自钉群“EMR Studio 用户交流群”

    2024-02-06 10:33:26
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关电子书

更多
Hive Bucketing in Apache Spark 立即下载
spark替代HIVE实现ETL作业 立即下载
2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载