重磅发布|云原生数据仓库AnalyticDB技术架构升级,大幅降低存储成本

简介: 云原生数据仓库AnalyticDB技术架构重磅升级,实现秒级扩缩容、大幅降低存储成本。

2021杭州云栖大会上,阿里云宣布云原生数据仓库AnalyticDB推出云原生+离在线一体化重大技术架构升级。AnalyticDB云原生架构基于云基础设施提供的资源池化和弹性存储能力,结合传统MPP数据库架构、离在线一体化技术以及Serverless技术创新,实现了存储计算分离、分层存储、秒级扩缩容以及多实例数据实时共享等诸多新特性,最高可降低10倍存储成本,大幅提升了计算和写入性能,让数据分析更实时、简单、高效。

3篇.jpg


AnalyticDB云原生架构版具有3大核心亮点:


1、秒级扩缩容和按需付费:AnalyticDB采用对象存储OSS作为持久化数据存储,采用分布式跨可用区的分布式事务引擎保存元数据,计算节点完全无状态化,存储和计算按需付费。实现秒级扩缩容能力,解决传统架构扩缩容过程中时间长、业务中断、存储计算耦合不灵活等痛点。


2、离在线一体化:采用高效的向量化以及Codegen技术,通过基于SIMD的向量化执行优化,在标准的TPC-DS测试集上带来5倍以上的性能提升;针对在线、离线混合负载场景,引入算子级时间片公平调度技术,实际压测中在线查询的RT最高可降低20倍;实现一个SQL引擎支持高并发交互式分析、实时更新以及高吞吐ETL处理。


3、满足事务一致性的高吞吐写和高性能读:AnalyticDB可支撑海量数据的高并发、高吞吐率写入,实现每秒百万行实时写入和更新。此外,还为用户提供了高性能读能力(接近本地盘)、以及低成本(可比拟对象存储)。读写均能满足事务ACID特性,写入数据实时可见。


随着数据规模爆炸性增长,数据处理技术也面临数据一致性和实时性、非结构化与结构化数据融合等新挑战。本次发布的云原生数据仓库AnalyticDB「云原生+离在线一体化」技术架构升级版,可大幅降低用户使用成本、为业务创新提速,让企业数据分析实时化、数据价值在线化。


目前,阿里云AnalyticDB已帮助制造业、金融、交通及政务等多个行业的数千家企业客户构建云原生数据仓库,满足企业快速增长、日趋复杂多变的数据分析需求,其中包括国税总局、中国南方航空、中国邮政、江门农商银行等,服务了众多事关国计民生的社会基础服务。

相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
目录
相关文章
|
人工智能 关系型数据库 OLAP
光云科技 X AnalyticDB:构建 AI 时代下的云原生企业级数仓
AnalyticDB承载了光云海量数据的实时在线分析,为各个业务线的商家提供了丝滑的数据服务,实时物化视图、租户资源隔离、冷热分离等企业级特性,很好的解决了SaaS场景下的业务痛点,也平衡了成本。同时也基于通义+AnalyticDB研发了企业级智能客服、智能导购等行业解决方案,借助大模型和云计算为商家赋能。
1077 17
|
10月前
|
存储 SQL 机器学习/深度学习
一文辨析:数据仓库、数据湖、湖仓一体
本文深入解析数据仓库、数据湖与湖仓一体的技术原理与适用场景。数据仓库结构严谨、查询高效,适合处理结构化数据;数据湖灵活开放,支持多模态数据,但治理难度高;湖仓一体融合两者优势,实现低成本存储与高效分析,适合大规模数据场景。文章结合企业实际需求,探讨如何选择合适的数据架构,并提供湖仓一体的落地迁移策略,助力企业提升数据价值。
一文辨析:数据仓库、数据湖、湖仓一体
|
10月前
|
存储 机器学习/深度学习 数据采集
数据湖 vs 数据仓库:大厂为何总爱“湖仓并用”?
数据湖与数据仓库各有优劣,湖仓一体架构成为趋势。本文解析二者核心差异、适用场景及治理方案,助你选型落地。
数据湖 vs 数据仓库:大厂为何总爱“湖仓并用”?
|
存储 缓存 分布式计算
StarRocks x Iceberg:云原生湖仓分析技术揭秘与最佳实践
本文将深入探讨基于 StarRocks 和 Iceberg 构建的云原生湖仓分析技术,详细解析两者结合如何实现高效的查询性能优化。内容涵盖 StarRocks Lakehouse 架构、与 Iceberg 的性能协同、最佳实践应用以及未来的发展规划,为您提供全面的技术解读。 作者:杨关锁,北京镜舟科技研发工程师
StarRocks x Iceberg:云原生湖仓分析技术揭秘与最佳实践
|
人工智能 关系型数据库 MySQL
AnalyticDB MySQL版:云原生离在线一体化数据仓库支持实时业务决策
AnalyticDB MySQL版是阿里云推出的云原生离在线一体化数据仓库,支持实时业务决策。产品定位为兼具数据库应用性和大数据处理能力的数仓,适用于大规模数据分析场景。核心技术包括混合负载、异构加速、智能弹性与硬件优化及AI集成,支持流批一体架构和物化视图等功能,帮助用户实现高效、低成本的数据处理与分析。通过存算分离和智能调度,AnalyticDB MySQL可在复杂查询和突发流量下提供卓越性能,并结合AI技术提升数据价值挖掘能力。
563 16
|
运维 算法 机器人
阿里云AnalyticDB具身智能方案:破解机器人仿真数据、算力与运维之困
本文将介绍阿里云瑶池旗下的云原生数据仓库AnalyticDB MySQL推出的全托管云上仿真解决方案,方案采用云原生架构,为开发者提供从开发环境、仿真计算到数据管理的全链路支持。
|
9月前
|
存储 人工智能 OLAP
AI Agent越用越笨?阿里云AnalyticDB「AI上下文工程」一招破解!
AI上下文工程是优化大模型交互的系统化框架,通过管理指令、记忆、知识库等上下文要素,解决信息缺失、长度溢出与上下文失效等问题。依托AnalyticDB等技术,实现上下文的采集、存储、组装与调度,提升AI Agent的准确性与协同效率,助力企业构建高效、稳定的智能应用。
|
10月前
|
存储 人工智能 关系型数据库
阿里云AnalyticDB for PostgreSQL 入选VLDB 2025:统一架构破局HTAP,Beam+Laser引擎赋能Data+AI融合新范式
在数据驱动与人工智能深度融合的时代,企业对数据仓库的需求早已超越“查得快”这一基础能力。面对传统数仓挑战,阿里云瑶池数据库AnalyticDB for PostgreSQL(简称ADB-PG)创新性地构建了统一架构下的Shared-Nothing与Shared-Storage双模融合体系,并自主研发Beam混合存储引擎与Laser向量化执行引擎,全面解决HTAP场景下性能、弹性、成本与实时性的矛盾。 近日,相关研究成果发表于在英国伦敦召开的数据库领域顶级会议 VLDB 2025,标志着中国自研云数仓技术再次登上国际舞台。
1145 1

热门文章

最新文章

相关产品

  • 云原生数据仓库AnalyticDB MySQL版