开发者社区> 问答> 正文

.Spark 怎么设置垃圾回收机制 ?

Spark 怎么设置垃圾回收机制 ?

展开
收起
愚笨如你 2020-02-14 19:54:31 1652 0
1 条回答
写回答
取消 提交回答
  • Spark 中各个角色的JVM参数设置:Driver 的 JVM 参数: GC 方式,如果是 yarn-client 模式,默认读取的是 spark-class 文件中的 JAVAOPTS;如果是 yarn-cluster 模式,则读取的是 spark-default.conf 文件中的 spark.driver.extraJavaOptions 对应的参数值。
    Executor 的 JVM 参数: GC 方式,两种模式都是读取的是 spark-default.conf 文件中的spark.executor.extraJavaOptions 对应的 JVM 参数值。

    2020-02-17 11:28:06
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载