开发者社区> 问答> 正文

定时hbase -> parquet数据一致遇到的问题

夏怒 2018-11-21 19:02:13 480

定时hbase -> parquet,如果hbase中存在追加或补发历史业务时间的数据,或者存在删除操作 ,怎样保证两边存储数据一致 ?又如何能按照业务时间做好分区呢 ?

分享到
取消 提交回答
全部回答(1)
  • 云hbase+spark
    2019-07-17 23:15:44

    数据导出要按时间分区,分区键可以是wal的时间,也可以是keyvalue的时间戳,按具体场景选择

    0 0
+ 订阅

分享数据库前沿,解构实战干货,推动数据库技术变革

推荐文章
相似问题
推荐课程