开发者社区 > 大数据与机器学习 > 实时数仓 Hologres > 正文

Hologres 实时写入场景有哪几种?

Hologres 实时写入场景有哪几种?

展开
收起
1358896759097293 2021-03-25 11:04:00 1066 0
1 条回答
写回答
取消 提交回答
  • 45271990@qq.com

    最常见的第一种就是实时写入场景。实时写入分为几种。  第一种,Hologres 的结果表没有设置主键,这样 Flink 实时接入就是一种 Append Only 的模式进行写入。当上游数据发生重复,或者 Flink 任务作业失败,上游数据会 需要进行回溯,这时候下游数据录入到 Hologres 中就会产生重复的数据。这种情形对 于日志型数据是比较合理的,因为用户并不需要关心数据是否需要进行去重。  第二种,Hologres 的结果表设置了主键。Flink 或者其它实时写入就会按照行的主键 进行更新。主键更新的意思就是说对于相同主键的两行数据,后到的数据会完全覆盖掉 之前已经到达的数据。  第三种,是按照主键去重。就是说后到的数据会被忽略掉,只保留最早到的一条记录。 这种场景用户并不关心主键的更新情况,只需要保证主键的去重。

    2021-03-25 14:01:55
    赞同 展开评论 打赏

本技术圈将为大家分析有关阿里云产品Hologres的最新产品动态、技术解读等,也欢迎大家加入钉钉群--实时数仓Hologres交流群32314975

相关产品

  • 实时数仓 Hologres
  • 相关电子书

    更多
    实时数仓Workshop(广州站)- 李佳林 立即下载
    阿里云实时数仓Hologres技术揭秘2.0 立即下载
    实时数仓Hologres技术实战一本通2.0版(下) 立即下载