开发者社区> 问答> 正文

MapReduce和spark相比,二者间的异同点是什么?

MapReduce和spark相比,二者间的异同点是什么?

展开
收起
游客y244y7ln2rlpa 2021-12-07 07:44:07 583 0
1 条回答
写回答
取消 提交回答
  • 二者间的异同点:

    1、基本原理上: (1) MapReduce:基于磁盘的大数据批量处理系统(2) Spark: 基于RDD(弹性分布式数据集)数据处理,显示将RDD数据存储到磁盘和内存中。

    2、模型上: (1) MapReduce可以处理 超大规模的数据,适合日志分析挖掘等较少的迭代的长任务需求,结合了数据的分布式的计算。(2) Spark: 适合数据的挖掘,机器学习等多轮迭代式计算任务。

    2021-12-07 08:08:07
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载