AI 助理
备案控制台
开发者社区 云原生 云消息队列 正文

请教下群里的大神，消息队列里只保留了2天的数据，实时表里需要补近7天的数据，怎么把hi #Flink

请教下群里的大神，消息队列里只保留了2天的数据，实时表里需要补近7天的数据，怎么把hive的数据先读到flink的state里，再去消费消息队列啊？#Flink

展开
收起
黄一刀 2020-08-21 21:30:42 2647 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • hill007300

    未来https://www.aliyun.com/product/rocketmq?spm=5176.14414305.J_8058803260.385.3ec65960K5Guu8会提供分级存储，提供月级别的存储时长

    2021-03-19 22:34:19
    赞同 展开评论
  • 黄二刀

    state process api 或者把历史数据当初维表去关联

    2020-08-21 21:31:32
    赞同 展开评论
问答分类：
消息中间件 SQL HIVE 流计算 实时计算 Flink版
问答标签：
实时计算 Flink版数据 消息队列数据 实时计算 Flink版保留 消息队列保留 消息队列flink
问答地址：
开发者社区 > 云原生 > 云消息队列 > 问答
相关问答
自建Kafka迁移到消息队列Kafka版之后如何验证两端数据一致
73
1
0
Flink连接消息队列Kafka版报错UnsupportedVersionException
136
1
0
Flink CDC 3.1.1 可以在目标表保留更新和删除前的数据吗？
53
1
0
Flink CDC 3.1.1 可以在目标表保留更新和删除前的数据吗？
71
0
0
Flink如何通过Dynamic Table解决消息队列无法有效进行实时分析的问题？
72
1
0
在Flink CDC中如下是这个参数控制保留hive 多久的分区吗？
98
0
0
Flink的快照位点大概可以保留多久的 3天的么？
81
1
0
微消息队列MQTT数据传入后多长时间同步
87
1
0
消息队列Kafka版实例消费被限流了同步数据时会导致丢失一部分数据吗
91
1
0
消息队列如果不允许自己ack的话，怎么保证数据都被处理了？
92
1
0
云原生

云消息队列

涵盖 RocketMQ、Kafka、RabbitMQ、MQTT、轻量消息队列(原MNS) 的消息队列产品体系，全系列产品 Serverless 化。RocketMQ 中文社区：https://rocketmq-learning.com/

我要提问

相关文章

  • 2025 年 Java 从零基础小白到编程高手的详细学习路线攻略
  • 终于！大数据分析不用再“又要快又要省钱”二选一了！Dataphin新功能太香了！
  • 常见面试题11
  • 天啊，Gitee 16k star项目,不要再傻傻重复造轮子啦，高效搭建企业级后台系统框架，你不应该试一下吗？
  • 数据同步最全避坑指南！4大痛点+4大场景技术方案

    • 热门讨论

    热门文章

  • 请教下 mqtt连接成功了，能收到消息， 后面又自动断开了连接， 是什么情况？
  • 为什么mqtt 连接一直显示 Not authorized to connect ？用的官网示例。
  • MQTT保持连接的话, 应该设置成多少?
  • RocketMQ有时候发送能消费到，有时候消费不到消息，发送都是成功了，这怎么排查是哪里出现问题了？
  • RocketMQ同一个消费组，订阅了不同topic，为啥会出现紊乱或者丢消息 ？
  • rocketmq客户端日志路径/root/logs/rocketmqlogs，怎么修改或者关闭日志?
  • MQTT消息单包最大64k,但是我们现在有超过64k的数据，有的都到90k了，是什么原因呢?
  • RocketMQ 这个错误是啥情况？有啥排查方向吗？
  • 我的rocketMQ生产端可以生产消息，但是消费端会无法顺利消费消息。
  • RocketMQ cve-2024-23321 漏洞
    • 展开全部
  • Redis Stream——作为消息队列的典型应用场景
  • 什么是消息队列？
  • SpringBoot开发案例之整合Kafka实现消息队列
  • 中国移动苏州研发中心消息队列高可用设计之谈 | SOFAStack 用户说
  • 【vue】项目使用mqtt消息队列实现推送
  • 基于TableStore构建简易海量Topic消息队列
  • Linux进程间通信——使用消息队列
  • 阿里云即将直播发布消息队列Kafka：全面融合开源生态
  • 【转载】消息队列RabbitMQ入门介绍
  • RabbitMQ消息队列（三）：任务分发机制
    • 展开全部
    还有其他疑问?
    咨询AI助理