Flink CDC里读取不到或读取不全消息 请问可能是什么原因？
Flink CDC里flink sql将消息写入upsert-kafka后，再通过upsert-kafka connector读取不到或读取不全消息 请问可能是什么原因？
展开
收起
1
条回答
写回答
写回答
-
可能情况：
1.从源头排查，打印数据看是否采集到了；
2.Flink内部过滤逻辑看看，有没有异常操作
3.kafka默认单条存储的限制是1M，可能数据大小引起的，调BATCH_SIZE_CONFIG这个配置。此回答来自钉群Flink CDC 社区。2024-01-24 18:08:08赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
1676
flink1.20.0 部署后发布报错，是怎么回事，各种配置都配置了
279
在建行，数据通常来源于哪些？
539
FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
3609
Flink 集群重启后，所有的Jobs任务全都没有了。如果快速恢复所有的任务
1283
请问如何用flink sql客户端用yarn application模式提交任务呢？
1565
Flink如何配置Task Manager？
694
Slot request bulk is not fulfillable，20以上job同时部署失败
782
请教下，finksql 这个statettl 哪里设置
1606
请问flink-connector-jdbc在sink时，如何设置批量写入？
3178
展开全部
权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
24480
OPPO数据中台之基石：基于Flink SQL构建实数据仓库
21931
Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
23405
Apache Flink 零基础入门（三）：DataStream API 编程
6807
阿里巴巴大规模应用Flink的踩坑经验：如何大幅降低 HDFS 压力？
3395
Flink 流批一体的实践与探索
6064
如果你也想做实时数仓…
2702
祝贺！两位 Apache Flink PMC 喜提 Apache Member
2789
实时数仓、1.10生产实践、AI 都来了，2020 首场 Flink 社区 Meetup，可！
1465
周末直播|Flink、Hologres、AI等热门话题全都安排！
4903
展开全部
相关课程
更多
相关文章
相关电子书
更多
