AI 助理
备案控制台
开发者社区 云原生 云消息队列 正文

发送到kafka提示这个错误 org.apache.kafka.common.KafkaExcept

发送到kafka提示这个错误 org.apache.kafka.common.KafkaException: Could not add partitions to transaction due to errors: {t-bi-db-etl-flink-cdc-data-assembly-0=CORRUPT_MESSAGE}这个错误怎么在程序里修复？

展开
收起
游客3oewgrzrf6o5c 2022-08-24 18:12:24 964 发布于浙江 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 游客fvyqioomjwulo

    这是kafka的阿里云版与开源版的区别导致的，阿里云版kafka使用云存储引擎时不支持幂等与事务，当程序里开启事务时就会出现这个问题。可以参考下这位仁兄的情况：https://zhuanlan.zhihu.com/p/630951990

    2024-02-22 15:55:33 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 行十三
    云端行者觅知音， 技术前沿我独行。 前言探索无边界， 阿里风光引我情。

    这个错误有点像是是由于Kafka集群中的错误导致的。根据错误消息中提供的信息，这个错误是由于“CORRUPT_MESSAGE”导致的。这意味着在Kafka集群中收到了错误的数据，并且该数据无法被正确接收和处理。

    2023-05-11 22:15:08 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
消息中间件 Kafka 实时计算 Flink版 云消息队列 Kafka 版
问答标签：
云消息队列 Kafka 版apache kafka Apache 云消息队列 Kafka 版发送到 云消息队列 Kafka 版提示
问答地址：
开发者社区 > 云原生 > 云消息队列 > 问答
相关问答
消息队列Kafka版
DataWorks中maxcomputer数据发送到kafka 连接不通怎么办？
81
1
0
Apache Kafka Streams 为何没有采用低水印方案？
55
1
0
Apache Kafka Streams 使用宽限时间方案有何优缺点？
69
1
0
Apache Kafka Streams 的完整性推理过程是怎样的？
50
1
0
Apache Kafka Streams 为何没有使用低水印方案进行完整性推理？
51
1
0
Flink1.12写kafka报错，Caused by: org.apache.kafka.comm
131
0
0
DataWorks中kafka同步任务，org.apache.kafka.clients.cons？
198
2
0
Apache RocketMQ中kafka也要开始做 轻量sdk和无状态消费模式了（不绑定队列）？
92
3
0
可以单向同步，将数据发送到kafka 吗？
42
1
0
Canal 发送到Kafka Topic 消息的同时，实现Partition 分区
125
1
0
云原生

云消息队列

涵盖 RocketMQ、Kafka、RabbitMQ、MQTT、轻量消息队列(原MNS) 的消息队列产品体系，全系产品 Serverless 化。RocketMQ 一站式学习：https://rocketmq.io/

我要提问
收录在圈子:
阿里云实时计算Flink
199211
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • AI 推理场景的痛点和解决方案
  • 微服务——SpringBoot使用归纳——Spring Boot中集成ActiveMQ—— JMS 和 ActiveMQ 介绍
  • 微服务——SpringBoot使用归纳——Spring Boot中集成ActiveMQ——ActiveMQ安装
  • 微服务——SpringBoot使用归纳——Spring Boot中集成ActiveMQ——ActiveMQ集成
  • 微服务——SpringBoot使用归纳——Spring Boot中集成ActiveMQ——发布/订阅消息的生产和消费

    • 热门讨论

    热门文章

  • MQTT保持连接的话, 应该设置成多少?
  • 请教下 mqtt连接成功了，能收到消息， 后面又自动断开了连接， 是什么情况？
  • 为什么mqtt 连接一直显示 Not authorized to connect ？用的官网示例。
  • MQTT消息单包最大64k,但是我们现在有超过64k的数据，有的都到90k了，是什么原因呢?
  • RocketMQ 5.x，当使用Proxy时消费者无法从slave节点拉取消息
  • RocketMQ5.0如何通过proxy实现内外网访问？
  • RocketMQ这个错误怎么解决？
  • rocketMQ配置了消费者，生产者发送成功了，但是无法消费
  • RocketMQ有时候发送能消费到，有时候消费不到消息，发送都是成功了，这怎么排查是哪里出现问题了？
  • Apache RocketMQ中消费者数量是队列数量的多，性能会有影响吗？
    • 展开全部
  • 消息队列（MQ）重磅推出MQTT移动物联套件
  • MQ消息队列.NET SDK的使用
  • 后端必备——数据通信知识(RPC、消息队列)一站式总结
  • 消息队列 Kafka学习总结
  • 网易云音乐的消息队列改造之路
  • 阿里云ACE共创空间——MQ消息队列产品测试
  • ENode 1.0 - 消息队列的设计思路
  • 消息队列MQ新增3把武器
  • RabbitMQ消息队列（七）：适用于云计算集群的远程调用(RPC)
  • 利用Redis 实现消息队列
    • 展开全部
    还有其他疑问?
    咨询AI助理