开发者社区> 问答> 正文

hadoop中实现全排序的必要条件是什么?

hadoop中实现全排序的必要条件是什么?

展开
收起
游客szyg5ww7yqnwy 2021-12-05 16:15:57 288 0
1 条回答
写回答
取消 提交回答
  • 若想实现全排序,我们只需保证:到第0个reducer的数据的最后一项一定小于到第1个reducer的数据的第一项,以此类推,到第n-1个reducer的数据的最后一项一定小于到第n个reducer的数据的第一项(假设我们job.setNumReduceTasks(n),即设定reduce任务数为n个,且按升序来排序)。

    2021-12-05 16:32:49
    赞同 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
《构建Hadoop生态批流一体的实时数仓》 立即下载
零基础实现hadoop 迁移 MaxCompute 之 数据 立即下载
CIO 指南:如何在SAP软件架构中使用Hadoop 立即下载

相关实验场景

更多