开发者社区 问答 正文

大家有没有这种场景,数据从binlog消费,这个信息是订单信息,同一个订单id,会有不同状态的变更,

大家有没有这种场景,数据从binlog消费,这个信息是订单信息,同一个订单id,会有不同状态的变更,如果订单表与商品明细join查询,就会出现n条重复数据,这样数据就不准了,flink 这块有没有比较好的实战经验的。 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

展开
收起
黄一刀 2019-11-26 15:33:29 1523 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 直接计算binlog吗?我也遇到过,binlog直接join ,危险太大了,而且数据准确性确实无法保证,而且在join中,因为数据乱序造成的没有匹配的结果,没有方法从侧输出中回收,建议使用kafka直接消费后端业务打过来的数据

    2019-11-26 15:34:40 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论