开发者社区> 问答> 正文

MapReduce中CombineTextInputFormat中的切片过程是什么?

MapReduce中CombineTextInputFormat中的切片过程是什么?

展开
收起
游客k7rjnht6hbtk6 2021-12-04 20:04:59 223 0
1 条回答
写回答
取消 提交回答
  • (a)判断虚拟存储的文件大小是否大于setMaxInputSplitSize值,大于等于则单独形成一个切片。

    (b)如果不大于则跟下一个虚拟存储文件进行合并,共同形成一个切片。

    2021-12-04 20:05:15
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
Hadoop存储与计算分离实践 立即下载
HBase2.0重新定义小对象实时存取 立即下载