《Serverless数据库技术研究报告》——四、 总结和展望——(一)PolarDB、AnalyticDB支撑双十一阿里集团电商业务(下)

简介: 《Serverless数据库技术研究报告》——四、 总结和展望——(一)PolarDB、AnalyticDB支撑双十一阿里集团电商业务(下)

《Serverless数据库技术研究报告》——四、 总结和展望——(一)PolarDB、AnalyticDB支撑双十一阿里集团电商业务(上) https://developer.aliyun.com/article/1223515?groupCode=polardbforpg


产品解决方案


面对OLTP业务挑战,阿里通过云化架构提升整体的技术效率和全局资源的弹性伸缩能力,数据库采用了云原生的自研数据库PolarDB提供了高弹性、高性能的云数据库服务,大幅降低了节日大促的保障成本和复杂度。PolarDB全面容器化发挥云的弹性能力,减少自采基础设施的投入在双十一前期,结合压测结果,业务预估所需资源按需申请,将原有资源占有时间从1年降低到1月,大幅降低成本。大促期间,serverless能力提供分钟级的规格自动调整,存储计算分离架构增加节点无需搬迁数据,分钟级扩展节点,快速紧急扩容保障用户体验。大促过后,资源自动降配,闲置资源自动释放降低成本。面对OLAP业务挑战,AnalyticDB 通过拥抱云原生,完成了重大架构升级,在公有云上也同步发布了新版弹性模式,让用户拥有极高性价比、极致弹性的新一代数据仓库。AnalyticDB的新弹性模式形态,后端采用了计算存储分离的新架构,提供统一的服务化Serverless存储层,计算层可以独立弹性扩展,同时兼具了预留模式的性能。通过计算与存储的解耦,用户可以灵活地单独对计算资源、存储容量进行扩缩,合理的控制成本。针对计算资源的扩缩,不再需要数据的搬迁,具备更极致的弹性体验。搭配AnalyticDB全新研发的行存引擎,在这个双11首次表现亮眼,可支持千万级QPS在线高并发检索和分析,实现单表点查、聚合及TopN是开源ElasticSearch的2-5倍,存储空间节省50%,写入性能是其5-10倍,并且保证数据的实时可见和数据高可靠。

1684815617525.png


客户收益


双十一交易系统全面云化,阿里云自研云原生数据库PolarDB承载了阿里电商核心业务数据库流量,按需资源分配,分钟级弹性扩缩容,支撑双十一亿级访问峰值,CPU利用率平均提升20%以上,单表交易成本下降50%,运营效率提升3倍,保障双十一业务平稳。AnalyticDB通过全面云原生化,成功的在这次双11中为阿里集团的核心业务保驾护航。从核心交易链路的高并发在线检索到复杂实时分析应用场景,表现非常稳定。当天各项指标再创新高,AnalyticDB当天的写入TPS峰值到达2.14亿,通过离在线一体化架构,支持在线ETL及实时查询Job数达到174571个/秒,离线ETL导入导出任务570267个,处理的实时数据量达到7.7万亿行。为核心业务方提供了数据处理ETL、实时在线分析、核心报表、大屏和监控能力,保障了数十万商家和千万消费者的稳定的离在线数据服务。

1684815726036.png

相关文章
|
SQL NoSQL 关系型数据库
实时数仓Hologres发展问题之实时数仓的类数据库化与HTAP数据库的差异如何解决
实时数仓Hologres发展问题之实时数仓的类数据库化与HTAP数据库的差异如何解决
365 2
|
存储 消息中间件 Java
抖音集团电商流量实时数仓建设实践
本文基于抖音集团电商数据工程师姚遥在Flink Forward Asia 2024的分享,围绕电商流量数据处理展开。内容涵盖业务挑战、电商流量建模架构、流批一体实践、大流量任务调优及总结展望五个部分。通过数据建模与优化,实现效率、质量、成本和稳定性全面提升,数据质量达99%以上,任务性能提升70%。未来将聚焦自动化、低代码化与成本优化,探索更高效的流批一体化方案。
980 12
抖音集团电商流量实时数仓建设实践
|
存储 关系型数据库 MySQL
【阿里规约】阿里开发手册解读——数据库和ORM篇
从命名规范、建表规范、查询规范、索引规范、操作规范等角度出发,详细阐述MySQL数据库使用过程中所需要遵循的各种规范。
【阿里规约】阿里开发手册解读——数据库和ORM篇
|
关系型数据库 OLAP 分布式数据库
揭秘Polardb与OceanBase:从OLTP到OLAP,你的业务选对数据库了吗?热点技术对比,激发你的选择好奇心!
【8月更文挑战第22天】在数据库领域,阿里巴巴的Polardb与OceanBase各具特色。Polardb采用共享存储架构,分离计算与存储,适配高并发OLTP场景,如电商交易;OceanBase利用灵活的分布式架构,优化数据分布与处理,擅长OLAP分析及大规模数据管理。选择时需考量业务特性——Polardb适合事务密集型应用,而OceanBase则为数据分析提供强大支持。
5575 2
|
SQL 分布式计算 调度
实时数仓 Hologres操作报错合集之在与PostgreSOL数据库进行通信时出现报错,如何解决
实时数仓Hologres是阿里云推出的一款高性能、实时分析的数据库服务,专为大数据分析和复杂查询场景设计。使用Hologres,企业能够打破传统数据仓库的延迟瓶颈,实现数据到决策的无缝衔接,加速业务创新和响应速度。以下是Hologres产品的一些典型使用场景合集。
|
弹性计算 运维 监控
函数计算产品使用问题之如何在阿里云端stable-diffusion训练lora
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
473 1
|
存储 SQL 数据库
实时数仓 Hologres产品使用合集之如何查看当前数据库下的所有表和表属性
实时数仓Hologres是阿里云推出的一款高性能、实时分析的数据库服务,专为大数据分析和复杂查询场景设计。使用Hologres,企业能够打破传统数据仓库的延迟瓶颈,实现数据到决策的无缝衔接,加速业务创新和响应速度。以下是Hologres产品的一些典型使用场景合集。
|
分布式计算 DataWorks 关系型数据库
阿里云数加-分析型数据库AnalyticDB数据导入的多样化策略
通过合理利用这些数据导入方法,用户可以充分发挥AnalyticDB的实时计算能力和高并发查询性能,为业务分析和决策提供强有力的数据支持。
|
存储 SQL 运维
OLAP数据库选型指南:Doris与ClickHouse的深入对比与分析
OLAP数据库选型指南:Doris与ClickHouse的深入对比与分析
|
11月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
989 30

相关产品

  • 云原生数据库 PolarDB