开发者社区 问答 正文

通过flink保存点读取重复的消息

我正在尝试使用Apache Flink 1.6.0从kafka主题中读取一些消息,转换它们并最终将它们发送到另一个kafka主题。在取消和重新声明的情况下,我使用保存点来保存应用程序的状态。问题是我重启后重复阅读邮件。kafka版本是011.

展开
收起
flink小助手 2018-12-10 10:36:55 2344 分享 版权
1 条回答
写回答
取消 提交回答
  • flink小助手会定期更新直播回顾等资料和文章干货,还整合了大家在钉群提出的有关flink的问题及回答。

    为避免重复,Semantic.EXACTLY_ONCE在设置kafka生产者时必须通过。

    2019-07-17 23:19:04
    赞同 展开评论