开发者社区> 问答> 正文

大家有没有这种场景,数据从binlog消费,这个信息是订单信息,同一个订单id,会有不同状态的变更,

大家有没有这种场景,数据从binlog消费,这个信息是订单信息,同一个订单id,会有不同状态的变更,如果订单表与商品明细join查询,就会出现n条重复数据,这样数据就不准了,flink 这块有没有比较好的实战经验的。 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

展开
收起
黄一刀 2019-11-26 15:33:29 1513 0
1 条回答
写回答
取消 提交回答
  • 直接计算binlog吗?我也遇到过,binlog直接join ,危险太大了,而且数据准确性确实无法保证,而且在join中,因为数据乱序造成的没有匹配的结果,没有方法从侧输出中回收,建议使用kafka直接消费后端业务打过来的数据

    2019-11-26 15:34:40
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
PolarDB-X 2.0 全局 Binlog 与备份恢复能 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载

相关实验场景

更多