开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC里集群偶发性的报这个错误,我们用的yarn,任务自动重启,对数据有影响不?

Flink CDC里集群偶发性的报这个错误,我们用的yarn,遇到这个错误,任务自动重启,容器就换了,对数据有影响吗?61dba6ad9195d90099248ab988f6cb56.png

展开
收起
小小鹿鹿鹿 2024-01-18 00:33:00 43 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    根据提供的错误信息,可以看出Flink CDC集群中出现了一个任务管理器无法访问的问题。这个问题可能会导致某些任务无法正常执行,从而对数据产生影响。具体影响取决于受影响的任务以及数据的处理方式。如果任务涉及到数据的读取、处理或输出,那么无法访问的任务可能会导致数据丢失、重复处理或其他异常情况。因此,建议尽快解决这个问题,以确保数据的完整性和准确性。

    2024-01-19 15:38:52
    赞同 展开评论 打赏
  • TM内存溢出,一般考虑是不是framework.off-heap 或者jvm-overhead溢出。应该是内存不足了,可能那个时间数据量大。此回答来自钉群Flink CDC 社区。

    2024-01-18 10:50:08
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    深度学习+大数据 TensorFlow on Yarn 立即下载
    Docker on Yarn 微服务实践 立即下载
    深度学习+大数据-TensorFlow on Yarn 立即下载