flink任务里面能用本地缓存吗（比如把数据存在HashMap里）？我把分库分表的表关系（如user
flink任务里面能用本地缓存吗（比如把数据存在HashMap里）？我把分库分表的表关系（如user0~user1000写到user表）缓存在HashMap里，把任务提交到集群环境后，HashMap打印出来发现是空的；在本地运行时是有值的
展开
收起
1
条回答
写回答
写回答
-
可以，使用的是堆内存，尽量不要用，这个应该不是写死的吧，是不是集群环境和数据源没有ping 通，弄个redis，也可以实现，你存在hashmap中的那个value，未必就存在于那个Task所在的TM所在的节点内存里，本地运行有值是因为你是用的本地模式，相当于只有一个节点，我也怀疑是这个原因，准备用redis，此回答整理自钉群“Flink CDC 社区”
2023-04-27 16:06:39赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
1640
AI生成海报or人工手绘，哪个更戳你？
288
flink1.20.0 部署后发布报错，是怎么回事，各种配置都配置了
255
在建行，数据通常来源于哪些？
538
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2707
数据来源：com.alibaba.fastjson.JSONException: syntax er
5638
请教一下DataWorks，doris和starRocks 选型，选哪个？
1480
Caused by: org.apache.kafka.common.errors.TimeoutE
3330
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3592
Apache Flink未授权访问上传导致的RCE漏洞，这个漏洞目前方案解决吗？
607
展开全部
相关课程
更多
相关文章
相关电子书
更多
