flink cdc 同步mysql数据库时 全量阶段出现 读取快照失败 连接重置的异常 导致应用重
，之前报的异常提示需要增加数据库的wait_timeout 时长 原本180s修改成7200s 但是测试同步到50分钟还是出现了连接重置的情况 java.lang.RuntimeException: One or more fetchers have encountered exception Caused by: org.apache.flink.util.FlinkRuntimeException: Read split MySqlSnapshotSplit{tableId=wms_shhg.bms_toll_item, splitId='wms_shhg.bms_toll_item:21', splitKeyType=[bms_toll_item_id DECIMAL(20, 0) NOT NULL], splitStart=[460405], splitEnd=[482329], highWatermark=null} error due to org.apache.kafka.connect.errors.ConnectException: Snapshotting of table wms_shhg.bms_toll_item failed. Caused by: org.apache.flink.util.FlinkRuntimeException: Read split MySqlSnapshotSplit{tableId=wms_shhg.bms_toll_item, splitId='wms_shhg.bms_toll_item:21', splitKeyType=[bms_toll_item_id DECIMAL(20, 0) NOT NULL], splitStart=[460405], splitEnd=[482329], highWatermark=null} error due to org.apache.kafka.connect.errors.ConnectException: Snapshotting of table wms_shhg.bms_toll_item failed. Caused by: org.apache.kafka.connect.errors.ConnectException: Snapshotting of table wms_shhg.bms_toll_item failed Caused by: java.sql.SQLException: Connection reset
写回答
-
十分耕耘，一定会有一分收获！楼主你好，根据你的报错信息可以看到，最直接的问题就是连接超时，你可以加长设置连接时长，增加间隔时间。
2023-01-30 13:52:34赞同 展开评论 打赏 -
这种情况可能是由于MySQL的连接超时导致的，你可以尝试增加MySQL的wait_timeout时长，或者增加Flink的checkpoint间隔时间，以减少MySQL连接的超时。
2023-01-17 16:00:56赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
