开发者社区 > 大数据与机器学习 > 正文

大佬们好 flinkcdc读取sqlserver全量数据 写入iceberg 大概3千万条

大佬们好 flinkcdc读取sqlserver全量数据 写入iceberg 大概3千万条 隔段时间就反复的报这个错误 导致taskmanager就重启了 一直不成功 请问是什么原因呢image.png

展开
收起
cuicuicuic 2023-04-25 18:14:36 92 0
1 条回答
写回答
取消 提交回答
  • 不是写着内存不够了?两个都设process.size就好了吧,你设置了几个并行度,你的错误我也看了,你是不是做了高可用,你看看是不是在那个时间有节点挂了,此回答整理自钉群“Flink CDC 社区”

    2023-04-27 15:02:10
    赞同 展开评论 打赏

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务
  • 相关电子书

    更多
    低代码开发师(初级)实战教程 立即下载
    冬季实战营第三期:MySQL数据库进阶实战 立即下载
    阿里巴巴DevOps 最佳实践手册 立即下载

    相关实验场景

    更多