AI 助理
备案控制台
开发者社区 问答 正文

Monitoring the Dynamic Resource Usage of Scala and Python Spark Jobs in Yarn

在SPARK SUMMIT 2017上，Ed Barnes, Ruslan Vaulin and Chris McCubbin Sqrrl Data分享了题为《Monitoring the Dynamic Resource Usage of Scala and Python Spark Jobs in Yarn》，就ML架构工作流，如何把spark运用到产品上等方面的内容做了深入的分析。

https://yq.aliyun.com/download/2128?spm=a2c4e.11154804.0.0.59316a793Ft1sn

展开
收起
福利达人 2018-07-29 00:48:46 1136 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
问答分类：
分布式计算 资源调度 Scala Spark Python
问答标签：
apache spark yarn Python jobs Python spark python apache spark Scala Spark
问答地址：
开发者社区 > 大数据 > 问答
相关问答
EMR集群如何配置Yarn和Spark组建的日志定期清理策略
135
1
0
大数据计算MaxCompute Spark可以支持yarn client模式吗？
53
1
0
dataworks用python写odps spark任务有任何办法引用到额外的jar包吗？
108
13
0
DataWorks如何创建ODPS Spark节点创建Python资源？
129
2
0
ADB MySQL湖仓版提交python任务到spark集群时，如何打包环境？
51
0
0
请问bin/spark-sql --master yarn不能进行集群模式运行吗？
212
4
0
spark.aliyun.odps.datasource 有没有基于scala 2.12构建的版本？
128
4
0
DataWorks中maxcomputer如何更换spark节点的Python版本？
102
4
0
DataWorks创建ODPS Spark节点创建Python资源？
147
4
0
DataWorks如何创建ODPS Spark节点创建Python资源？
147
1
0