开发者社区 > 数据库 > 正文

进入 Fast Data 时代,主要的挑战包括哪几个方面?

进入 Fast Data 时代,主要的挑战包括哪几个方面?

展开
收起
詹姆斯邦德00 2021-12-22 14:40:53 393 0
1 条回答
写回答
取消 提交回答
  • 主要的挑战包括四个方面:

    • 首先是高吞吐的实时写入,这是实时数仓的一个核心前置条件。数据只有能够快速的进入分析系统,实时才具备可行性。因此,可以认为高吞吐的实时写入是 Fast Data 的基础。

    • 其次是在离线混合工作负载。企业数字化分析是多元化的,涵盖了实时的 BI 决策,实时报表、数据 ETL、数据清洗以及 AI 分析。传统数仓方案是通过组合多套数据库与大数据产品,利用各自不同的优势来解决不通的分析场景,而带来的问题就是整个数据冗余,同时需要维护多个异构系统管理的代价。

    • 第三是冷数据低成本、热数据高性能的一体化存储。在解决了一套系统同时支持在离线分析后,那么带来的核心问题是:如何既能够支持在线分析高性能,同时又可以支持冷数据的低成本存储。因此,动态的数据管理机制和灵活的缓存策略也将是一个很大的挑战。

    • 最后是弹性可扩展。数仓中分析类查询对资源的灵活需求,由于业务变化而不断变化的数据体量,都对弹性这一云原生的核心特征提出了诉求。

    资料来源:《数据库:从趋势到实践》,链接:https://developer.aliyun.com/topic/download?id=1113

    2021-12-22 14:42:04
    赞同 展开评论 打赏
问答地址:

数据库领域前沿技术分享与交流

相关电子书

更多
在线分析进入Fast Data时代的关键技术解读 立即下载
Better Together: Fast Data wit 立即下载
Check Point云安全视角 领先一步 ONE STEP AHEAD 立即下载