Flink CDC里读取不到或读取不全消息 请问可能是什么原因？
Flink CDC里flink sql将消息写入upsert-kafka后，再通过upsert-kafka connector读取不到或读取不全消息 请问可能是什么原因？
展开
收起
1
条回答
写回答
写回答
-
可能情况：
1.从源头排查，打印数据看是否采集到了；
2.Flink内部过滤逻辑看看，有没有异常操作
3.kafka默认单条存储的限制是1M，可能数据大小引起的，调BATCH_SIZE_CONFIG这个配置。此回答来自钉群Flink CDC 社区。2024-01-24 18:08:08赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
请问如何用flink sql客户端用yarn application模式提交任务呢？
552
不同版本的 flink 如何适配不同版本 kafka，flink-connect-kafka 版本
284
flink 和flink cdc 和 flink sql client 啥区别？
302
Flink CDC有遇见这个问题的吗？
769
Caused by: org.apache.kafka.common.errors.TimeoutE
2508
flink怎么能够快速消费kafka数据，需要设置什么参数呢？
519
flink web UI 是不是本身不支持登录认证，必须通过nginx来加登录认证？
813
flink Task 故障恢复
38
flink1.15启动后无法访问webui的问题有人遇到过吗
10136
使用Flink CDC，生产环境要申请的服务器如何评估
992
展开全部
分布式Snapshot和Flink Checkpointing简介
19647
Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
27073
Apache Paimon统一大数据湖存储底座
13227
Apache Flink 漫谈系列(04) - State
13667
阿里巴巴高级技术专家章剑锋：大数据发展的 8 个要点
8186
咱们从头到尾讲一次 Flink 网络流控和反压剖析
5869
从 Storm 到 Flink，汽车之家基于 Flink 的实时 SQL 平台设计思路与实践
7995
大数据情报第二期（2018-6-19）
4039
日处理数据量超10亿：友信金服基于Flink构建实时用户画像系统的实践
4931
性能提升约 7 倍！Apache Flink 与 Apache Hive 的集成
3167
展开全部
相关课程
更多
相关文章
相关电子书
更多
