flinkcdc 同步tidb到hudi报错，哪位遇到过这个问题吗?
flinkcdc 同步tidb到hudi报错，哪位大佬遇到过这个问题吗?org.tikv.shade.io.grpc.StatusRuntimeException: UNAVAILABLE: Keepalive failed. The connection is likely gone
at org.tikv.shade.io.grpc.stub.ClientCalls.toStatusRuntimeException(ClientCalls.java:287) ~[tikv-client-java-3.2.0.jar:na]
at org.tikv.shade.io.grpc.stub.ClientCalls.getUnchecked(ClientCalls.java:268) ~[tikv-client-java-3.2.0.jar:na]
at org.tikv.shade.io.grpc.stub.ClientCalls.blockingUnaryCall(ClientCalls.java:175) ~[tikv-client-java-3.2.0.jar:na]
at org.tikv.kvproto.PDGrpc$PDBlockingStub.getMembers(PDGrpc.java:1868) ~[tikv-client-java-3.2.0.jar:na]
at org.tikv.common.PDClient.getMembers(PDClient.java:443) [tikv-client-java-3.2.0.jar:na]
at org.tikv.common.PDClient.tryUpdateLeader(PDClient.java:565) [tikv-client-java-3.2.0.jar:na]
at org.tikv.common.PDClient.lambda$initCluster$15(PDClient.java:730) [tikv-client-java-3.2.0.jar:na]
at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511) ~[na:1.8.0_381]
at java.util.concurrent.FutureTask.runAndReset$$$capture(FutureTask.java:308) ~[na:1.8.0_381]
at java.util.concurrent.FutureTask.runAndReset(FutureTask.java) ~[na:1.8.0_381]
at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$301(ScheduledThreadPoolExecutor.java:180) ~[na:1.8.0_381]
at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:294) ~[na:1.8.0_381]
写回答
-
面对过去，不要迷离；面对未来，不必彷徨；活在今天，你只要把自己完全展示给别人看。这个问题可能是由于网络不稳定或者TiDB集群的负载过高导致的。你可以尝试以下方法解决这个问题：
- 检查网络连接是否正常，确保Flink CDC和TiDB之间的网络通信畅通。
- 增加TiDB集群的节点数量，以提高集群的处理能力。
- 调整Flink CDC的配置参数，例如增加任务重试次数、减少任务执行间隔等，以应对高负载情况。
- 使用监控工具（如Prometheus、Grafana等）对TiDB集群进行实时监控，以便及时发现并解决问题。
2024-01-09 15:02:22赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
