开发者社区 问答 正文

Spark的三种比较器是什么?

Spark的三种比较器是什么?

展开
收起
游客fbdr25iajcjto 2021-12-06 21:50:40 614 分享 版权
1 条回答
写回答
取消 提交回答
  • 下述代码列出了目前的三种比较器:

    keyComparator:按照指定的key进行排序;

    partitionComparator:按照partition id进行比较;

    partitionKeyComparator:先按照partition id进行比较,再按照指定的key进行第二级排序。当没有指定排序字段并且没有指定聚合函数时会退化为partitionComparator。

    2021-12-06 21:51:23
    赞同 展开评论
问答分类:
问答地址: