使用flinksql提供的内置函数LAST_VALUE 发现存的state越来越大的原因是是什么？
补充下具体设置： 使用flink1.10。。开启了mini-batch和设置了idleStateRetentionTime，在最后sink的时候insert into table select a, LAST_VALUE(b) group by a; 有关配置如下： val tConfig: TableConfig = tEnv.getConfig tConfig.setIdleStateRetentionTime(Time.hours(1), Time.hours(2)) val configuration = tEnv.getConfig().getConfiguration() configuration.setString("table.exec.mini-batch.enabled", "true") configuration.setString("table.exec.mini-batch.allow-latency", "5 s") configuration.setString("table.exec.mini-batch.size", "5000") 发现状态越来越大。
请问，有人遇到过这个问题吗？*来自志愿者整理的flink邮件归档
写回答
-
我设置了状态过期，如下。使用内置函数LAST_VALUE后，观察lastCheckpointSize大小，发现其越来越大。 。请问，下面的设置对LAST_VALUE会生效吗？我应该怎么处理呢？感谢！ TableConfigtConfig=tableEnv.getConfig(); tConfig.setIdleStateRetentionTime(Time.hours(12),Time.hours(24));*来自志愿者整理的FLINK邮件归档
2021-12-02 14:17:17赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
