开发者社区> 问答> 正文

E-MapReduce集群上跑spark任务时报错This timeout is contro...

已解决

E-MapReduce集群上跑spark任务时报错This timeout is controlled by spark.rpc.askTimeout

展开
收起
提个问题 2024-06-12 18:07:14 10 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    大量计算报错链接拒绝,解决方法可以参考:
    1.增加硬件资源 ,加大executor内存。
    2.修改spark-defaults.conf ,加大executor通信超时时间spark.executor.heartbeatInterval
    2024-06-12 18:07:16
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载