我在用flink cdc的从oracle同步历史数据到doris，请教一下存量数据是先全部拉到内存，
我在用flink cdc的从oracle同步历史数据到doris，请教一下存量数据是先全部拉到内存，拉完后再从内存存入doris吗？小数据量的时候没有问题，当我拉一个大表（2千万数据量，2个G大小）历史数据的时候，跑3-5分钟就报错了，怀疑是不是资源问题。有大佬指点一下吗。
展开
收起
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
幻兽帕鲁服务器搭建
2176
DataWorks如何通过spark访问外网呢？
465
DataWorks undefined requestID: undefined？
326
实验中 Elasticsearch、es kibana login 的默认用户和口令是什么？
1908
数据来源：com.alibaba.fastjson.JSONException: syntax er
3560
Elasticsearch更新数据时报错: Rejecting mapping update to
1031
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
1318
DataWorks我该如何访问A项目安装了项目的package资源？
926
机器学习PAI现在一直在重试，怎样停掉？
251
flink 和flink cdc 和 flink sql client 啥区别？
342
展开全部
Hologres+Flink企业级实时数仓核心能力介绍
70700
阿里云开源离线同步工具DataX3.0介绍
103589
DataV 4.0 功能简介
105601
一站式实时数仓Hologres整体能力介绍—2024实时数仓Hologres公开课 01
127808
数据库开放权限太危险，又不想写API。DataV给你另外一个选择。
46742
阿里封神谈hadoop生态学习之路
48803
DataV带你回顾春节前后全国空气质量变化
51080
DataV回调id——从入门到精通
68442
大数据环境下该如何优雅地设计数据分层
40255
盘古：阿里云飞天分布式存储系统设计深度解析
44531
展开全部
相关文章
相关电子书
更多
