开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

麻烦问下,flink表数据会删除或者过期吗?我需要针对全量和增量的数据做聚合操作

麻烦问下,flink表数据会删除或者过期吗?我需要针对全量和增量的数据做聚合操作

展开
收起
游客3oewgrzrf6o5c 2022-07-04 18:30:02 909 0
1 条回答
写回答
取消 提交回答
  • 十分耕耘,一定会有一分收获!

    楼主你好,阿里云 Flink 表的数据不会自动删除或过期,需要手动处理。您可以考虑在表的数据过期前,定期执行数据清理操作。

    针对全量和增量数据的聚合操作,您可以使用 Flink 的窗口函数来实现。全量聚合可以使用 TumblingWindow 或者 SlidingWindow 函数,增量聚合可以使用 CountWindow 或者 TimeWindow 函数。具体选用哪种窗口函数,取决于您对数据的要求和业务需求。

    2023-08-03 10:13:17
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载