开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

请问一下,datastream方式读取mongodb变化数据,参数调过了没啥效果,也没有背压,延迟还

请问一下,datastream方式读取mongodb变化数据,参数调过了没啥效果,也没有背压,延迟还是有点大。请问这几个参数mongodb能用吗'debezium.log.mining.batch.size.min' = '1', 'debezium.log.mining.batch.size.default' = '1', 'debezium.log.mining.sleep.time.default.ms' = '10',怎么办?

展开
收起
游客bcfx2q4kttgbm 2022-07-05 18:21:38 596 0
1 条回答
写回答
取消 提交回答
  • 全栈JAVA领域创作者

    如果你在使用DataStream方式读取MongoDB变化数据时,调整了相关参数但是没有效果,可能是由于以下几个原因:

    数据库连接失败:如果你在读取MongoDB变化数据时数据库连接失败,将会导致无法读取变化数据。为了解决这个问题,你可以检查数据库连接的配置是否正确,例如主机地址、端口、用户名、密码等等。
    数据库表不存在:如果你在读取MongoDB变化数据时使用了不存在的数据库表名,将会导致无法读取变化数据。为了解决这个问题,你可以检查数据库表是否存在,以确保能够正确地访问数据库表。
    数据库字段缺失:如果你在读取MongoDB变化数据时使用了数据库字段不存在的字段名,将会导致无法读取变化数据。为了解决这个问题,你可以检查数据库表的字段是否存在,以确保能够正确地访问数据库字段。
    参数设置不正确:如果你在读取MongoDB变化数据时设置了错误的参数,例如数据挖掘的批量大小、睡眠时间等等,将会导致无法读取变化数据。为了解决这个问题,你可以检查参数的设置是否正确,以确保能够正确地读取变化数据。
    为了解决这个问题,你可以尝试以下几个步骤:

    检查数据库连接的配置是否正确,例如主机地址、端口、用户名、密码等等。
    检查数据库表是否存在,以确保能够正确地访问数据库表。
    检查数据库表的字段是否存在,以确保能够正确地访问数据库字段。
    检查参数的设置是否正确,例如数据挖掘的批量大小、睡眠时间等等。
    需要注意的是,在使用DataStream方式读取MongoDB变化数据时,你需要确保数据的准确性和可靠性,以便能够保证数据的完整性和一致性。同时,你还需要定期检查DataStream任务的日志和错误信息,以便及时发现和解决问题。

    2023-08-20 09:02:29
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

相关电子书

更多
Data as a Service - 数据即服务 -- MongoDB⾼级应⽤模式 立即下载
开源数据库 MongoDB 专场 MongoDB疑难杂症分析及优化 立即下载
饿了么高级架构师陈东明:MongoDB是如何逐步提高可靠性的 立即下载