开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

同一个query比较regular join和interval join的state大小 如果我在r

同一个query比较regular join和interval join的state大小 如果我在regular join中table.exec.state.ttl的时间和 interval join中interval的时间 设置成一样的。是不是可以说两者的state就差不多大了?唯一的区别只是regular join下发的是retract流,interval join下发的是append流?

展开
收起
游客3oewgrzrf6o5c 2022-08-11 13:49:38 278 0
1 条回答
写回答
取消 提交回答
  • CSDN全栈领域优质创作者,万粉博主;InfoQ签约博主;华为云享专家;华为Iot专家;亚马逊人工智能自动驾驶(大众组)吉尼斯世界纪录获得者

    是的,如果在regular join中table.exec.state.ttl的时间和interval join中interval的时间设置成一样的,那么两者的state大小就差不多了。因为在这种情况下,两个join操作的状态都会被缓存起来,并且在一定时间内不会被清除。 如果在regular join中table.exec.state.ttl的时间和interval join中interval的时间设置成一样的,并且只存在retract流和append流的区别,那么两者的state大小应该是差不多的。因为在这种情况下,两个join操作的状态都会被缓存起来,并且在一定时间内不会被清除。唯一的区别只是retract流会将不再需要的数据从内存中删除,而append流则会将新数据添加到内存中。但是这种区别对于state的大小影响非常小,可以忽略不计。

    2023-06-28 16:01:39
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
Semantic Search--Fast Results from Large,Foreign Language Corpora 立即下载
Froma single droplet toafull b 立即下载
Lazy Join Optimizations Without Upfront Statistics 立即下载