开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们,我想用flinksql 开10s的窗,根据这个dim字段来分组 处理数据然后写入kafka里

大佬们,我想用flinksql 开10s的窗,根据这个dim 字段来分组 处理数据然后写入kafka里,现在有个问题 , 在第一个 10s窗扣造了 dim01字段值的数据,必须在第二个 10s窗里再造个 dim01字段值的数据 这样第一个10s窗口的dim01的数据才会输出, 有知道是什么原因的吗?3777问.png

展开
收起
游客3oewgrzrf6o5c 2022-08-30 11:41:46 752 0
3 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    窗口的临界值没有掌控好,这类问题需要考虑临界的情况。

    2023-01-30 18:07:01
    赞同 展开评论 打赏
  • 十分耕耘,一定会有一分收获!

    楼主你好,根据错误信息可以推出,是窗口模式引起的,你可以在窗口开始和结束的时候进行设置对应的操作。

    2023-01-30 14:16:51
    赞同 展开评论 打赏
  • 这可能是由于Flink SQL的窗口模式造成的,Flink SQL的窗口模式是按照时间窗口来处理数据的,每个窗口都会有一个起始时间和结束时间,在每个窗口的起始时间和结束时间之间的数据都会被处理,而在窗口结束时,窗口中的数据会被输出。因此,如果您想要在第二个10s窗口中输出第一个10s窗口中的dim01字段值的数据,您需要在第二个10s窗口中重新造出这些数据。

    2023-01-18 10:39:30
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

相关电子书

更多
Java Spring Boot开发实战系列课程【第16讲】:Spring Boot 2.0 实战Apache Kafka百万级高并发消息中间件与原理解析 立即下载
MaxCompute技术公开课第四季 之 如何将Kafka数据同步至MaxCompute 立即下载
消息队列kafka介绍 立即下载