开发者社区 > 大数据与机器学习 > 正文

咨询下,大家用Flink CDC采集数据之后,下游是怎么消费的?有用MQ接收的吗?现在碰到一个问题,

咨询下,大家用Flink CDC采集数据之后,下游是怎么消费的?有用MQ接收的吗?现在碰到一个问题,下游如果用MQ接收(不可改变),配置多个消费者的话,如何保证消息消费的顺序一致性呀?比如如果用pulsar的shared的模式,顺序就错乱了。如果用其他的模式,又会引发单节点问题,以及动态调整消费节点的复杂度,请问有什么建议处理这种场景呢?

展开
收起
真的很搞笑 2023-06-11 16:52:28 73 0
1 条回答
写回答
取消 提交回答
  • 我下游是用kafka接收的,我是单独指定分区消费的,此回答整理自钉群“Flink CDC 社区”

    2023-06-11 17:02:41
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载