最常见的第一种就是实时写入场景。实时写入分为几种。 第一种,Hologres 的结果表没有设置主键,这样 Flink 实时接入就是一种 Append Only 的模式进行写入。当上游数据发生重复,或者 Flink 任务作业失败,上游数据会 需要进行回溯,这时候下游数据录入到 Hologres 中就会产生重复的数据。这种情形对 于日志型数据是比较合理的,因为用户并不需要关心数据是否需要进行去重。 第二种,Hologres 的结果表设置了主键。Flink 或者其它实时写入就会按照行的主键 进行更新。主键更新的意思就是说对于相同主键的两行数据,后到的数据会完全覆盖掉 之前已经到达的数据。 第三种,是按照主键去重。就是说后到的数据会被忽略掉,只保留最早到的一条记录。 这种场景用户并不关心主键的更新情况,只需要保证主键的去重。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
本技术圈将为大家分析有关阿里云产品Hologres的最新产品动态、技术解读等,也欢迎大家加入钉钉群--实时数仓Hologres交流群32314975