备案控制台

开发者社区> 问答> 正文

Spark中快的特点体现的地方是什么？

Spark中快的特点体现的地方是什么？

展开

收起

游客daliwbfb2wo66 2021-12-07 19:01:24 202 0

1 条回答

写回答

取消提交回答

游客k7rjnht6hbtk6

与Hadoop的MapReduce相比，Spark基于内存的运算要快100倍以上，基于硬盘的运算也要快10倍以上。Spark实现了高效的DAG执行引擎，可以通过基于内存来高效处理数据流。计算的中间结果是存在于内存中的。

2021-12-07 19:01:39

赞同展开评论打赏

问答分类：

分布式计算 Spark

问答标签：

apache spark特点 apache spark特点地方

问答地址：

开发者社区 > 大数据 > 问答

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

大数据系统（Hadoop/Spark）特点是什么？

540

1

0

spark 中的RDD 有什么特点吗？

2323

1

0

Spark的特点有哪些呢？

349

1

0

spark部署模式中的Spark On Mesos模式具体有哪些特点啊？

735

1

0

spark部署模式中的Spark on yarn模式具体有哪些特点啊？

689

1

0

spark部署模式中的standalone模式具体有哪些特点啊？

648

1

0

spark部署模式中的本地模式具体有哪些特点啊？

774

1

0

MaxCompute Spark通过DataWorks提交的参数和配置有何特点？

936

1

0

MaxCompute Spark通过DataWorks提交的资源引用特点是啥？

968

1

0

MaxCompute Spark它统一的数据和权限管理特点是什么呢？

816

1

0

问答排行榜

最热

最新

1 通过阿里云代备案系统进行个人快速备案 2699751

2 【大咖问答】对话PostgreSQL 中国社区发起人之一，阿里云数据库高级专家德哥 1818256

3 据说在家办公的程序员是这样写代码的？ 1792236

4 阿里云开放端口权限 689857

5 《阿里云服务器从入门到精通》—论坛精华帖汇总（2013.8.21更新） 599443

6 如何升级配置 536051

7 【藏经阁一起读（27）】本周推荐《Apache Flink案例集（2022版）》，你有哪些心得？ 522401

8 【精品问答】python技术1000问(1) 513976

9 Flink Forward Asia 2021 有奖问答 512789

10 Linux Bash严重漏洞修复紧急通知（已全部给出最终修复方案） 456911

11 OceanBase 使用动画（持续更新） 359247

12 阿里云LNAMP(Linux + Nginx + Apache + MySQL + PHP)环境一键安装脚本 329712

13 OSS存储服务-客户端工具 321298

14 为体验实验室取一个新名字。 307256

15 企业邮箱发送邮件时，若出现投递失败产生退信，内容提示包含如下： the mta server of * reply:550 failed to meet SPF requirements 或者 the mta server of 163.com — 163mx01.mxmail.netease.com(220.181.14.141) reply:550 MI:SPF mx14,QMCowECpA0qTiftVaeB3Cg—.872S2 1442548128 http://mail.163.com/help 303798

16 Win Server 2003-2016 加密勒索事件必打补丁合集 295137

17 FLASH播放器，在IE浏览器下显示请确定您的域名已完成备案和CNAME绑定 283558

18 安全组详解，新手必看教程 277240

19 写code还是做管理，开发者如何进行职业规划？ 268376

20 惊喜翻倍：免费ECS+免费环境配置~！(ECS免费体验6个月活动3月31日结束) 255815

1 图像生成技术飞速发展，我们距离个人化艺术创造的旅程还有多远？ 532

2 你的编程能力从什么时候开始突飞猛进的？ 309

3 阿里云主力模型直降97%，两百万Tokens进入一元时代，对AI行业有哪些影响？ 308

4 乘风问答官6月排位赛开启！Xiaomi Watch S3手表等好礼等你赢~ 210

5 宜搭连接器在通过数据源调用时如何给path参数赋值 156

6 最近大模型降价潮，哪家才是真的“价美”也“物美”？ 2084

7 一条SQL语句的执行究竟经历了哪些过程？ 1188

8 当AI“复活”成为产业，如何确保数字生命技术始终用于正途？ 596

9 自定义页面，如何搭建搜索框，还有配置分页 103

10 在视觉智能平台中sdk调用超化的时候报错未知的名称或服务，是什么原因？ 574

11 如何简单快速搭建出适配于多平台的小程序？ 1617

12 宜搭自定义页面如何把页面数组的值传递给报表 111

13 OA审批如何调用宜搭应用里面的数据。 129

14 如何在业务代码中优雅地使用责任链模式？ 1095

15 AI技术对开发者的职业天花板是提升还是降低？ 1349

16 如何在报表的最后一行加上某一列的合计数？ 365

17 宜搭-自定义控件，开发的自定义控件怎样与页面上其他标准组件通信或联动？ 223

18 如何修改数据管理页中默认的显示列的排列顺序。 118

19 如何下载无影云电脑的快照到本地保存？ 110

20 怎么修改宜搭页面上的按钮颜色呢？ 169

相关课程

更多

大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段

283

33

去学习

大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段

92

25

去学习

大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段

125

32

去学习

大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段

180

21

去学习

大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段

324

9

去学习

大数据实时计算框架Spark快速入门

778

93

去学习

推荐问答

乘风问答官招募中！机械键盘免费拿

相关电子书

更多

Hybrid Cloud and Apache Spark 立即下载

Scalable Deep Learning on Spark 立即下载

Comparison of Spark SQL with Hive 立即下载