开发者社区> 问答> 正文

Flink RetractStream如何转成AppendStream?

在用Flink做实时数仓时遇到group by统计后需要将结果发到kafka,但是现在的kafka

sink是不支持RetractStream,因此会报错,有没有什么方法将RetractStream转成AppendStream(例如,忽略撤回的消息,只发送更新的消息),从而可以将结果发到kafka? *来自志愿者整理的flink邮件归档

展开
收起
EXCEED 2021-12-08 11:40:08 1357 0
1 条回答
写回答
取消 提交回答
  • 目前 Kafka 只支持 append mode,所以无法消费 retract stream。在 Flink 1.11,社区将计划支持

    RetractStream 转成 AppendStream 的操作,以 changelog 的方式输出。*来自志愿者整理的flink邮件归档

    2021-12-08 14:26:28
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
《Apache Flink-重新定义计算》PDF下载 立即下载
Apache Flink 案例集(2022版) 立即下载
《Apache Flink-实时即未来》 立即下载