AI 助理
备案控制台
开发者社区 问答 正文

SPARK程序运行的流程是怎样的？

SPARK程序运行的流程是怎样的？

展开
收起
游客coqayqskxr2xe 2021-12-06 20:55:54 623 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客jegljo24q422m

    1，分布式文件系统（File system）--加载数据集（RDD） 2，transformations延迟执行--针对RDD的操作 3，Action触发执行

    2021-12-06 20:56:29
    赞同 展开评论
问答分类：
分布式计算 Spark
问答标签：
apache spark运行 apache spark流程 apache spark程序 apache spark运行流程 apache spark程序流程
问答地址：
开发者社区 > 大数据 > 问答
相关问答
E-MapReduce开启使用DLF统一元数据后本地开发spark程序想访问emr hive中...
76
0
0
在大数据计算MaxCompute中，云下的spark程序如何才能访问oss外表数据呢？
135
2
0
在供应链核算的Spark处理流程中，主要包含哪些主流程？
38
1
0
Dataworks运行scala-spark程序一直不动？
124
1
0
在表格存储中spark写入ots程序没有报错，但是为什么查询ots的时候，发现没有数据？
128
2
0
MaxCompute中spark程序里查询和处理的数据量有限制吗？
112
3
0
大数据计算MaxCompute在spark程序里面操作表数据，应该一次查询多少条 ?
92
1
0
大数据计算MaxCompute spark 程序里如何访问redis?
100
2
0
大数据计算MaxCompute通过spark程序访问lindorm，连接不成功是什么原因呢？
101
1
0
dataworks里的spark程序连接数据源，需要开通或者配置什么？
98
1
0