这个问题应该怎么去排查?flink cdc sink到hudi里,任务之前是正常的。

"这个问题应该怎么去排查,flink cdc sink到hudi里,任务之前是正常的。
a003bbc066a44bd0a321b98fc8cc9533.png
293ba816b76121d0552771bd110b8cec.png
991551d964ecb95eac82207f6f6b682c.png
"

展开
收起
十一0204 2023-08-16 00:21:59 80 分享 版权
1 条回答
写回答
取消 提交回答
  • Flink CDC Sink 到 Hudi 时出现问题,可能有以下原因:

    Hudi 未启动。 确保 Hudi 已经启动,并检查是否能够正常访问。
    Hudi 配置错误。 检查 Hudi 的配置,确保配置正确无误。
    Flink CDC 配置错误。 检查 Flink CDC 的配置,确保配置正确无误。
    Flink CDC 任务出现问题。 检查 Flink CDC 任务的运行情况,确保任务没有出现异常。
    可以通过以下方法进行排查:

    检查 Hudi 的日志,查看是否有错误信息。
    检查 Flink CDC 的日志,查看是否有错误信息。
    使用 Jaeger 等工具查看 Flink CDC 任务的调用链,查看是否有异常。
    使用 Flink 的 CLI 或 WebUI 查看 Flink CDC 任务的运行情况。
    使用 Flink 的 Metrics 查看 Flink CDC 任务的监控指标。
    根据错误信息,可以进一步排查问题的具体原因。

    2023-09-22 11:16:06
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理