开发者社区 问答 正文

Flink在写入Iceberg表时,如何确保主键相同的数据写入到同一个bucket?

Flink在写入Iceberg表时,如何确保主键相同的数据写入到同一个bucket?

展开
收起
萝卜丝丸子 2024-08-07 19:10:47 97 发布于江西 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 由于Flink表的DDL不直接支持Iceberg的bucket定义,我们通过在Flink DDL的property中定义bucket来确保主键相同的数据写入到同一个bucket。这种方式允许我们在Flink任务中灵活地配置数据分区策略。image.png

    2024-08-07 19:55:44 举报
    赞同 3 评论

    评论

    全部评论 (0)

    登录后可评论
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等