开发者社区> 问答> 正文

【Flink的shuffle mode】

看Flink源码时候,在应用中使用keyBy后,源码的transformations会有shuffle mode方法,这个shuffle mode看是UNDEFINED的。

那么,shuffle mode有哪些方式?在应用里面可以设置么?

*来自志愿者整理的flink邮件归档

展开
收起
小阿矿 2021-12-06 15:18:48 596 0
1 条回答
写回答
取消 提交回答
  • 现在就两种:pipeline和batch

    batch的话是block住,直到执行完毕才发给下游的,所以这个shuffle mode一般只对批作业有用。

    理论上可以per transformation的来设置,see PartitionTransformation.

    *来自志愿者整理的flink邮件归档

    2021-12-06 17:00:47
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载