开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

请问,Flink CDC将SQL Server 2012数据库一亿数据写入Hudi,要多少配置?

之前我花了不少时间配置好环境顺利插入百万条数据,然后尝试上亿条数据的操作,一直不成功。请问一下,Flink CDC将SQL Server 2012数据库的一亿条数据表写入Hudi表,需要服务器什么物理配置,这是我现在的内存等配置50196a932f1c0d54526c8117c759bd65.png

展开
收起
滴滴滴~ 2023-03-21 14:56:19 202 0
1 条回答
写回答
取消 提交回答
  • 你这个配置太小了,起码刚开始的是数据是全量你需要10倍的上。 此答案整理自钉群“Flink CDC 社区”

    2023-03-21 16:48:49
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
SQL Server 2017 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载