开发者社区> 问答> 正文

数仓中海量数据处理常用方法MapReduce法是什么意思呢?

数仓中海量数据处理常用方法MapReduce法是什么意思呢?

展开
收起
游客ahv54x37wvm7u 2021-12-12 20:15:09 680 0
1 条回答
写回答
取消 提交回答
  • MapReduce是云计算的核心技术之一,是一种简化并行计算的分布式编程模型,主要目的是为了大型集群的系统能在大数据集上进行并行工作,并用于大规模数据的并行运算。海量数据处理的最大难题在于数据规模巨大,使得传统处理方式面临计算能力不和存储能力不足的瓶颈问题,而基于Hadoop可以非常轻松和方便完成处理海量数据的分布式并行程序,并运行与大规模集群上。

    2021-12-12 20:15:23
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
基于云原生数据仓库AnalyticDB PG的最佳实践 立即下载
新氧云原生全栈数仓最佳实践 立即下载
离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进 立即下载