AI 助理
备案控制台
开发者社区 问答 正文

Flink的Hudi写入模式如何进行数据更新

已解决

Flink的Hudi写入模式如何进行数据更新

展开
收起
阿里云服务支持 2022-12-16 15:25:56 318 分享 版权
来自： 阿里云支持与服务

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 阿里云服务支持
    官方回答

    更新写 'write.operation' = 'upsert' 是默认的，可以不用配置 write.precombine.field是相同 record key （主键）的数据通过 write.precombine.field 指定的字段来判断哪个更新，即 precombine 字段更大的 record 更新，如果是相等的 precombine 字段，则后来的数据更新 index.bootstrap.enabled 是 开启索引加载，会将已存表的最新数据一次性加载到 state 中 ，详情参考帮助文档。

    2022-12-16 15:41:56
    赞同 展开评论
问答分类：
流计算 实时计算 Flink版
问答标签：
实时计算 Flink版模式 实时计算 Flink版hudi 实时计算 Flink版数据更新
问答地址：
开发者社区 > 阿里云支持与服务 > 问答
相关问答
Flink CDC里hudi和paimon哪个更好？
793
1
0
请问下，flink cdc sql方式，当一条数据更新时，结果会输出1条数据还是2条数据？
257
1
0
Flink CDC里有hudi的pipeline connector吗？
190
2
0
未来在 Flink CDC 写入 Hudi 的技术上有哪些规划？
87
1
0
在使用 Flink CDC 写入 Hudi 时，如何解决数据倾斜问题？
143
1
0
你们是如何解决Hudi与Flink的checkpoint一致性问题的？
117
1
0
在Hudi on Flink的初期使用中，你们遇到了哪些问题，并与Hudi社区一起进行了哪些优化？
79
1
0
在Flink CDC中sink hudi 遇到这个问题怎么解决？
88
1
0
Flink通过hudi操作DLF表报错 Please use RAM to authorize...
67
1
0
Flink有没有尝试写入数据到hudi，存储在本地文件系统的？
196
5
0