兄弟们这个错误有人遇到过吗？kafka -》flink-》 starrocks
兄弟们这个错误有人遇到过吗？kafka -》flink-》 starrocks
嗯嗯 有测试脏数据，只try catch还不行 有"毒丸"问题 消费者应用程序正在使用Kafka主题。
在某个时间点，应用程序无法对记录进行反序列化（遇到毒丸）。
消费者不能处理毒丸。
因为使用者偏移量没有向前移动，所以阻止了主题分区的使用。
消费者将一次又一次地（非常迅速地）尝试反序列化记录，但是永远不会成功。因此，您的消费者应用程序将陷入一个无穷循环，尝试对失败的记录进行反序列化。
对于每次失败，都会在您的日志文件中写入一行…不太懂，我们现在的链路也是flink消费kafka写starrocks，脏数据都是直接就跳过了....
展开
收起
1
条回答
写回答
写回答
问答分类：
问答标签：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
FFA 2024 大会门票免费送！AI时代下大数据技术未来路在何方？
1447
在建行，数据通常来源于哪些？
534
flink1.20.0 部署后发布报错，是怎么回事，各种配置都配置了
199
大佬，Caused by: java.lang.ClassNotFoundException: or
511
数据来源：com.alibaba.fastjson.JSONException: syntax er
5610
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
2668
请问flink-connector-jdbc在sink时，如何设置批量写入？
3140
Caused by: org.apache.kafka.common.errors.TimeoutE
3299
请教一下DataWorks，doris和starRocks 选型，选哪个？
1454
Flink 集群重启后，所有的Jobs任务全都没有了。如果快速恢复所有的任务
1250
展开全部
阿里云开源离线同步工具DataX3.0介绍
105518
你刚吃的兰州牛肉面，背后就藏着大数据
43155
大数据环境下该如何优雅地设计数据分层
40522
盘古：阿里云飞天分布式存储系统设计深度解析
45068
拍立淘-以图搜图中的图像搜索算法
36996
【大数据干货】轻松处理每天2TB的日志数据，支撑运营团队进行大数据分析挖掘，随时洞察用户个性化需求。
16746
干货：解码OneData，阿里的数仓之路。
20943
[大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute
15714
MaxCompute常见错误汇总（更新ing）
23739
OpenSearch：轻松构建大数据搜索服务
17015
展开全部
相关课程
更多
相关文章
相关电子书
更多
