AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

有一张 维表，维表更新频率不高，维表数据不多只有几百条，而且记录只增加不更改，想通过async io

有一张 维表，维表更新频率不高，维表数据不多只有几百条，而且记录只增加不更改，想通过async io + 缓存实现维表访问。如果 命中缓存直接返回，没有命中则Async 请求. 那 维表缓存是的实现时AsyncFunction 实现类里面写入 State状态吗？

展开
收起
云上静思 2022-08-02 11:42:28 339 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 云墩墩

    缓存状态也行，隔几秒（分钟）定时拉一下维表也行。可以参考这个例子： https://www.jianshu.com/p/fe711f0b3e81

    此答案来自钉钉群“【2】Apache Flink China 社区”

    2022-08-02 11:54:28
    赞同 展开评论
问答分类：
实时计算 Flink版
问答标签：
数据io io async
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
Flink Async IO 超时导致检查点一直失败帮忙看一下嘛？
214
4
0
云数据仓库ADB在写入数据时，一旦触发BUILD任务，磁盘IO就会被打满，各位大佬有什么优化建议吗？
98
1
0
在AOFRW（AOF重写）过程中，为什么同一份数据会产生两次磁盘IO？
55
1
0
Hologres往表里追究几亿数据，怎么加大这个资源？或者允许磁盘io?
90
1
0
Flink CDC Async IO 超时导致检查点一直失败帮忙看一下嘛？
100
1
0
我用阿里云网盘与相册就是录入新数据的时候，提示“ 读入时磁盘IO错误”， 之前遇到过这个问题吗？
81
3
0
云数据仓库ADB这边的计算资源是对应购买页上的计算资源；数据资源指的是购买页上的弹性IO资源吗？
84
1
0
有个NAS问题想要咨询一下，当系统中更新数据会清理NAS上的缓存，有什么办法提升NAS的IO速度吗？
35549
3
0
要怎么测pfs文件系统的IO？之前PL1的ESSD盘导数据都有70M以上的速度
550
1
0
mongoshake同步数据过程中，报出io timeout的错误，debug日志能看到具体原因吗？
546
0
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199210
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • 探索Flink动态CEP：杭州银行的实战案例
  • CI/CD（五）Flink 应用部署
  • Flink CDC + Hologres高性能数据同步优化实践
  • 基于Flink CDC 开发，支持Web-UI的实时KingBase 连接器，三大模式无缝切换，效率翻倍！
  • 官宣 | Fluss 0.6 发布公告

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • flink cdc 有没得官方介绍文档？
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • flink大作业启动频繁报akka.pattern.AskTimeoutException 大家有
  • FlinkKafkaConsumer 1.11的clientId什么的看不到这个怎么解决吗？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • 在Flink为什么遇到这个报错后，作业虽然RUNNING，但是却HANG死了？会有什么隐形的坑吗？
  • Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
  • Please specify JAVA_HOME. Either in Flink config .
    • 展开全部
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
  • 广告场景下的实时计算
  • 如何在 PyFlink 1.10 中自定义 Python UDF？
  • 使用 Kafka 和 Flink 构建实时数据处理系统
  • 阿里巴巴高级技术专家章剑锋：大数据发展的 8 个要点
  • 咱们从头到尾讲一次 Flink 网络流控和反压剖析
  • Apache Flink 零基础入门（三）：DataStream API 编程
  • Flink入坑指南 第四章：SQL中的经典操作Group By+Agg
  • 如何在 Apache Flink 中使用 Python API？
  • 阿里重磅开源全球首个批流一体机器学习平台Alink，Blink功能已全部贡献至Flink
    • 展开全部
    还有其他疑问?
    咨询AI助理