如何在AWS Glue中导入Spark包?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

如何在AWS Glue中导入Spark包?

2018-12-12 11:37:13 1303 1

我想使用GrameFrames包,如果我在本地运行pyspark,我会使用命令:

~/hadoop/spark-2.3.1-bin-hadoop2.7/bin/pyspark --packages graphframes:graphframes:0.6.0-spark2.3-s_2.11

但是,如何使用此包运行AWS Glue脚本?我在文档中找不到任何内容......

取消 提交回答
全部回答(1)
  • 社区小助手
    2019-07-17 23:20:05

    您可以提供包含在s3中的zip存档中的额外库的路径。

    0 0
相关问答

5

回答

Spark 【问答合集】

社区小助手 2019-05-29 14:13:40 130226浏览量 回答数 5

10

回答

【精品问答合集】Hbase热门问答

hbase小能手 2019-05-29 14:37:26 123842浏览量 回答数 10

37

回答

SaaS模式云数据仓库MaxCompute 百问百答合集(持续更新20220424)

亢海鹏 2020-05-29 15:10:00 89284浏览量 回答数 37

2

回答

Blink计算引擎 【精品问答集锦】

管理贝贝 2016-07-21 17:03:19 29608浏览量 回答数 2

20

回答

【阿里云产品公测】简单日志服务SLS使用评测含教程

mr_wid 2014-10-09 07:18:30 42311浏览量 回答数 20

8

回答

问几个小白问:服务器重置?数据恢复?及其他?

ap6681c6b 2012-08-15 20:47:42 38833浏览量 回答数 8

5

回答

java.lang.UnsupportedOperationException: This is supposed to be overridden by subclasses.

迷茫君 2019-07-16 09:26:11 120862浏览量 回答数 5

18

回答

MaxCompute百问集锦(持续更新20171011)

隐林 2017-06-30 18:30:36 53462浏览量 回答数 18

1

回答

【开源分享】-6期- Linkis 一款支持多种计算存储引擎的企业级计算中间件

montos 2020-05-08 10:55:23 29460浏览量 回答数 1

11

回答

速戳 | 20位阿里出题专家-备战阿里必不可少的题目

Runt 2020-04-15 10:54:04 63797浏览量 回答数 11
+关注
社区小助手
社区小助手是spark中国社区的管理员,我会定期更新直播回顾等资料和文章干货,还整合了大家在钉群提出的有关spark的问题及回答。
12
文章
824
问答
问答排行榜
最热
最新
相关电子书
更多
JS零基础入门教程(上册)
立即下载
性能优化方法论
立即下载
手把手学习日志服务SLS,云启实验室实战指南
立即下载