spark Sql都是client模式,而有时driver需要较多的资源,多用户共享一台机器时,client物理机资源可能会成为瓶颈,这个你们有什么解决方案吗-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

spark Sql都是client模式,而有时driver需要较多的资源,多用户共享一台机器时,client物理机资源可能会成为瓶颈,这个你们有什么解决方案吗

2019-05-30 10:17:03 3304 1

spark Sql都是client模式,而有时driver需要较多的资源,多用户共享一台机器时,client物理机资源可能会成为瓶颈,这个你们有什么解决方案吗

取消 提交回答
全部回答(1)
  • 社区小助手
    2019-07-17 23:36:21

    可以用livy来提交spark-cluster的application,然后客户提交给livy,这块我们也做了一些工作

    0 0
相关问答

1

回答

Spark是因为什么快,Spark SQL 一定比 Hive 快吗

2021-12-12 20:57:37 405浏览量 回答数 1

1

回答

spark sql为什么比hive快?

2021-12-06 01:08:51 139浏览量 回答数 1

1

回答

Spark SQL中的Hive表是什么?

2020-12-28 11:45:00 430浏览量 回答数 1

0

回答

Comparison of Spark SQL with Hive

2018-07-28 23:06:28 795浏览量 回答数 0

1

回答

Spark Streaming 原理是什么?

2022-01-13 15:54:26 1117浏览量 回答数 1

1

回答

Spark Streaming中的DStream的输出操作是什么?

2021-12-07 20:17:49 134浏览量 回答数 1

1

回答

Spark Streaming中的DStream的转化操作是什么?

2021-12-07 20:17:05 110浏览量 回答数 1

1

回答

spark streaming中的foreachRDD(func)方法是什么?

2021-12-07 08:05:05 290浏览量 回答数 1

1

回答

如何使用Spark Streaming SQL进行 PV/UV统计?

2020-12-28 11:38:30 483浏览量 回答数 1

1

回答

使用Spark Streaming SQL进行 PV/UV统计的准备工作?

2020-12-28 11:39:00 413浏览量 回答数 1
+关注
社区小助手
社区小助手是spark中国社区的管理员,我会定期更新直播回顾等资料和文章干货,还整合了大家在钉群提出的有关spark的问题及回答。
12
文章
824
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载