Flink CDC mongodb 2.2.1 读取没有数据打印,有没有处理过类似问题?

Flink CDC mongodb 2.2.1 读取没有数据打印,查看ck卡住in_processing,jm和tm的日志如下,没看到有报错提示。有没有大佬处理过类似问题?b9d9ae40d4d272f37d5dee534d833e0d.png
19e6d690da5938c778cd5b70829c02ab.png

展开
收起
真的很搞笑 2023-10-23 14:49:23 58 分享 版权
1 条回答
写回答
取消 提交回答
  • 这个问题可能是由于Flink CDC在处理MongoDB数据时遇到了问题。为了解决这个问题,你可以尝试以下方法:

    1. 检查MongoDB的日志文件,看看是否有任何错误或警告信息。这可能会帮助你找到问题的根源。

    2. 调整Flink CDC的配置参数。例如,你可以尝试增加sink.batch.max-rowssink.batch.max-duration的值,以便让Flink CDC能够处理更多的数据。

    3. 检查你的MongoDB数据库连接设置。确保你正确地指定了数据库主机、端口、用户名和密码等信息。

    4. 如果可能的话,尝试使用不同的MongoDB版本,看看问题是否仍然存在。这可以帮助你确定问题是否与特定版本的MongoDB有关。

    2023-10-23 16:45:52
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理