开发者社区> 问答> 正文

E-MapReduce通过hive jdbc方式向集群提交多条不同类型的sql任务会偶发报错 ...

已解决

E-MapReduce通过hive jdbc方式向集群提交多条不同类型的sql任务会偶发报错 Caused by: org.apache.thrift.transport.TTransportException: java.net.SocketException: Broken pipe (Write failed)

展开
收起
提个问题! 2024-06-11 10:14:28 12 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    遇到该问题,需要观察一下集群监控-指标监控,选择Hive-HiveServer2监控项,查看Hive GC相关的指标是否正常,是否出现gc时间较长的情况,组件GC服务停顿的时候您提交作业可能就会遇到上述的报错问题。建议参考该文档调大Hive内存之后,再观察问题是否复现。
    2024-06-11 10:14:29
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hive Bucketing in Apache Spark 立即下载
spark替代HIVE实现ETL作业 立即下载
2019大数据技术公开课第五季—Hive迁移到MaxCompute最佳实践 立即下载