开发者社区 > 大数据与机器学习 > 实时数仓 Hologres > 正文

预计算+批流一体的即席查询混合模式由什么构成?

已解决

预计算+批流一体的即席查询混合模式由什么构成?

展开
收起
游客lmkkns5ck6auu 2022-09-26 22:47:11 280 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    • 即席查询部分:Hologres+Flink流批一体的数据架构,使用了Hologres的分区表和即时 查询能力。将公共层的实时明细数据写入当日分区,离线侧公共层明细数据由 MaxCompute直接导入覆盖Hologres次日覆盖分区(对于准确性和稳定性非严苛的场 景,可以选择都去掉离线 erge的步骤),同时写入时注意配置主键覆盖,防止实时任务 异常时,可以回刷。各维度的指标计算,直接在Hologres中通过 聚合,即时返回查 询结果,非常方便的适应统计指标的需求变更。

    • 预计算部分:保留了之前比较成熟的Flink+HBase+OneService的计算、存储和服务架 构。主要通过Flink实时聚合指标,并写入HBase,OneService做查询服务和链路切换。 高可用和稳定性场景,构建主备链路,可能还会配合离线指标数据回流,修复实时链路可 能出现的异常和误差。以上内容摘自《阿里云实时数仓Hologres最佳实践合集》电子书,点击https://developer.aliyun.com/topic/download?id=996 可下载完整版

    2022-09-26 23:49:17
    赞同 展开评论 打赏

本技术圈将为大家分析有关阿里云产品Hologres的最新产品动态、技术解读等,也欢迎大家加入钉钉群--实时数仓Hologres交流群32314975

热门讨论

热门文章

相关电子书

更多
超大规模图计算引擎 在在线零售场景中的应用 立即下载
Hologres物化视图升级 构建企业一站式实时数仓 立即下载
听云平台RUM业务数据的实时流式处理实践 立即下载