AI 助理
备案控制台
开发者社区 问答 正文

spark 执行RDD操作中的Lazy Calculate有什么好处吗？

已解决

spark 执行RDD操作中的Lazy Calculate有什么好处吗？

展开
收起
游客dof4ggxyen75u 2022-11-01 16:40:31 2378 分享 版权
来自： 阿里云开发者学堂

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客dew6wbsuwerqa
    推荐回答

    使用Lazy Calculate 的主要原因是尽量节约内存，当不得已必须要执行计算时，才真正去占用内存，在此之前不占用内存，所以其内存使用效率高。

    2022-11-01 16:53:55
    赞同 展开评论
问答分类：
分布式计算 Spark
问答标签：
apache spark rdd apache spark操作 apache spark RDD操作 apache spark执行
问答地址：
开发者社区 > 阿里云开发者学堂 > 问答
相关问答
Spark的RDD和DataFrame编程模式如何帮助提升核算效率？
48
1
0
DataWorks最近有新增spark SQL相关支持，是需要重新初始化吗？有相关的操作文档吗？
53
1
0
大数据计算MaxCompute在spark程序里面操作表数据，应该一次查询多少条 ?
57
1
0
DataWorks中spark操作odps，写入时报的错，哪位给看看什么原因引起的？
162
2
0
我根据操作maxcompute spark 在idea调试，不能正常执行，这个是什么情况呢？
117
1
0
DataWorks里，odps spark支持操作redis吗，如何操作？
233
2
0
DataWorks怎么操作ODPS Spark节点？
286
1
0
spark 执行RDD操作的过程要注意什么吗？
2348
1
0
spark 中的RDD 有什么特点吗？
2345
1
0
spark 架构在执行时是怎么做并行的？
2374
1
0
收录在圈子:
阿里云开发者学堂
131202
+ 订阅
技术图谱：由专家组参与技术图谱的绘制与编写，知识与实践的结合让开发者们掌握学习路线与逻辑，快速提升技能 电子书：电子书由阿里内外专家打造，供开发者们下载学习，更与课程相结合，使用户更易理解掌握课程内容 训练营：学习训练营 深入浅出，专家授课，带领开发者们快速上云 精品课程：汇集知识碎片，解决技术难题，体系化学习场景，深入浅出，易于理解 技能自测：提供免费测试，摸底自查 体验实验室：学完即练，云资源免费使用
问答排行榜
最热
最新
  • 【大咖问答】对话PostgreSQL 中国社区发起人之一，阿里云数据库高级专家 德哥
  • 据说在家办公的程序员是这样写代码的？
  • 阿里云开放端口权限
  • 如何升级配置
  • 【藏经阁一起读（27）】本周推荐《Apache Flink案例集（2022版）》，你有哪些心得？
  • 如何用实时数据同步打破企业数据孤岛？
  • lmstudio拉起qwq-32b-q3_k_m.gguf模型报错？
  • 工作中，拥有什么样的“软技能”可以跨越周期、终身成长？
  • 都按正常流程操作了，这到底什么问题？无法把问题具体描述
  • 在idea中使用通义灵码插件时，回答结果比较长时会发生中断，导致回答不完整

    • 相关文章

  • MCP+Hologres+LLM搭建数据分析Agent
  • Hologres实时湖仓能力入门实践
  • 查询队列（Query Queue）快速入门
  • 《智能数据建设与治理 Dataphin》的最佳实践
  • 【YashanDB知识库】hive初始化崖山报错YAS-04209
    • 还有其他疑问?
    咨询AI助理