开发者社区 问答 正文

快手自研的渐进式窗口解决方案是如何解决数据准确性和时效性的问题的?

快手自研的渐进式窗口解决方案是如何解决数据准确性和时效性的问题的?

展开
收起
萝卜丝丸子 2024-08-19 21:09:19 49 分享 版权
1 条回答
写回答
取消 提交回答
  • 快手自研的渐进式窗口解决方案通过设定天级别的窗口和输出的分钟步长,使用watermark机制控制窗口计算,确保乱序和晚到数据不丢失,同时通过控制步长窗口的输出保障数据的时效性和平滑性,从而将整体数据差异从1%降低到0.5%。

    2024-08-19 22:23:28
    赞同 3 展开评论
问答地址: