开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

请帮忙看一下flink cdc导入hudi有什么问题吗?

1428181f89a74c89b212da7ac57dfde2.png 之前我flink cdc导入hudi表1W条数据不成功,原来是分区字段我用了id结果分区过多,一直写入超时,后来改好了用了几百分区的字段就没问题了,后来我尝试了导入百万数据的表也成功了,现在我尝试导入一亿多条数据的表,等了20多分钟,也不报错,也没内容写入hudi,正常吗?

展开
收起
滴滴滴~ 2023-03-21 14:41:03 303 0
1 条回答
写回答
取消 提交回答
  • 发表文章、提出问题、分享经验、结交志同道合的朋友

    可能是因为作业正在处理数据并在后台进行计算,可以查看作业的日志和状态。

    2023-03-23 11:41:34
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载