以下问题一般会是什么原因呢？是查询数据量太大了么？是否可以设置切片的大小？
flink cdc在抓myql快照阶段报 GC overhead limit exceeded一般会是什么原因呢？是查询数据量太大了么？是否可以设置切片的大小？io.debezium.DebeziumException: org.apache.kafka.connect.errors.ConnectException: Snapshotting of table icharge.s_ele_bill_fee failed at com.ververica.cdc.connectors.mysql.debezium.task.MySqlSnapshotSplitReadTask.execute(MySqlSnapshotSplitReadTask.java:120) ~[blob_p-7e8a6555910bfee5e01b7eee4499 15f604eb19984-f92ce5e576b0de423e5b0a5f96b45329:?]
写回答
-
技术架构师 阿里云开发者社区技术专家博主 CSDN签约专栏技术博主 掘金签约技术博主 云安全联盟专家 众多开源代码库Commiter在Flink CDC的MySQL快照阶段遇到“GC overhead limit exceeded”错误，通常是由于查询数据过大。可能可以通过调整切片大小来解决此问题。
错误消息“io.debezium.DebeziumException: org.apache.kafka.connect.errors.ConnectException: Snapshotting of table icharge.s_ele_bill_fee failed at com.ververica.cdc.connectors.mysql.debezium.task.MySqlSnapshotSplitReadTask.execute(MySqlSnapshotSplitReadTask.java:120)”表示快照表icharge.s_ele_bill_fee失败。
要解决此问题，请尝试调整切片大小或减少查询的数据量。
2023-04-10 17:20:11赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
