【选型指导】从头构建数据分析,如何做好AnalyticDB PostgreSQL的产品选型

简介: ADBPG的产品线比较丰富,很多同学都想知道应该如何选择最适合自己的产品。本文从用户的数据链路视角切入,带大家快速基于现有的数据体系,构建ADBPG的数据仓库服务;

售卖形态介绍

ADBPG 目前主力在售的有两种形态,一种为存储弹性形态,另一种为serverless形态;


存储弹性: 该形态能力较为全面,无功能裁剪;产品成熟度非常高;

Serverless:该形态为ADBPG的主力演进形态,部分功能暂不支持,可参考功能对比;该形态支持计算秒级的弹性和存储的按需付费,可实现按需使用:同时全新架构在复杂分析,跑批等场景下的性能有极强的优势;


接下来,我们以数据链路的视角来帮助您在这个时刻选择最适合你的ADBPG产品规格;


链路选择

建议根据您目前保有的数据源进行选型。

如果您当下保有主要为大数据离线数据湖,请选择Serverless版本,它能够提供通过更快的通过攒批的方式 + DMS的任务调度完成进行导入;

如果您当下数据都保存在RDS、Polar DB或者在ECS上自建了数据库,我们建议您选择存储弹性模式,使用DTS进行快速的数据同步。存储弹性模式支持【主键】,可以快速承载您现在的表格式,完成一键建仓;


以下为典型数据格式的建仓及相关使用指导;


当前保有的数据存储

建议选型

快速开始指导

  • OSS 存储
  • Maxcompute 存储
  • HDFS 存储

Serverless 版本

若需要构建同步链路可参考:https://developer.aliyun.com/article/893176 ,可根据不同的数据源进行调整;
数据源使用介绍:
1OSS数据导入: https://help.aliyun.com/document_detail/164815.html
2MaxCompute 数据导入:https://help.aliyun.com/document_detail/172968.html
3HDFS 数据导入:https://help.aliyun.com/document_detail/154138.html

  • RDS 和 Polar 数据库, 如MySQL、PostgreSQL、SQL Server;
  • ECS上自建的数据库
  • Flink流数据

存储弹性(高性能版)

对于OLTP数据库,需要使用DTS进行数据同步;
1构建数据链路:https://help.aliyun.com/document_detail/311152.html
2自建数据库导入: https://help.aliyun.com/document_detail/300120.html

Flink接入:https://help.aliyun.com/document_detail/408979.html




典型场景

  1. 更经济的数据仓库: 支持按需存储, 极低存储单价,对于大数据量且有分析需求的场景有着很强的适配性.
  2. 高性能海量数据分析: TB及以上的复杂数据分析可秒级返回,有明显的性能优势;
  3. 数据湖分析: 支持对数据湖数据进行高效分析,引擎支持一套引擎对多数源进行敏捷分析;
  4. 业务中台: 构建业务中台,支持业务数据ETL,分析,生成洞见的使用链路,支持企业报表,大盘等主要数据应用,支持业务;
  5. 可持续发展的数据平台: 极强的架构可扩展性,从单数据中台到“中心数据中台+多点数据市场”的灵活拓展,支持数据共享,秒级弹性,支持任意级别的数据平台建设;
相关实践学习
AnalyticDB PostgreSQL 企业智能数据中台:一站式管理数据服务资产
企业在数据仓库之上可构建丰富的数据服务用以支持数据应用及业务场景;ADB PG推出全新企业智能数据平台,用以帮助用户一站式的管理企业数据服务资产,包括创建, 管理,探索, 监控等; 助力企业在现有平台之上快速构建起数据服务资产体系
相关文章
|
9月前
|
机器学习/深度学习 算法 大数据
构建数据中台,为什么“湖仓一体”成了大厂标配?
在大数据时代,数据湖与数据仓库各具优势,但单一架构难以应对复杂业务需求。湖仓一体通过融合数据湖的灵活性与数据仓的规范性,实现数据分层治理、统一调度,既能承载海量多源数据,又能支撑高效分析决策,成为企业构建数据中台、推动智能化转型的关键路径。
|
人工智能 关系型数据库 OLAP
光云科技 X AnalyticDB:构建 AI 时代下的云原生企业级数仓
AnalyticDB承载了光云海量数据的实时在线分析,为各个业务线的商家提供了丝滑的数据服务,实时物化视图、租户资源隔离、冷热分离等企业级特性,很好的解决了SaaS场景下的业务痛点,也平衡了成本。同时也基于通义+AnalyticDB研发了企业级智能客服、智能导购等行业解决方案,借助大模型和云计算为商家赋能。
969 17
|
8月前
|
人工智能 数据挖掘 数据库
通义灵码产品演示: 数据库设计与数据分析
本演示展示如何使用通义灵码进行数据库设计与数据分析。通过SQLite构建电商订单表,利用AI生成表结构、插入样本数据,并完成多维度数据分析及可视化图表展示,体现AI在数据库操作中的高效能力。
690 8
|
8月前
|
存储 人工智能 关系型数据库
阿里云AnalyticDB for PostgreSQL 入选VLDB 2025:统一架构破局HTAP,Beam+Laser引擎赋能Data+AI融合新范式
在数据驱动与人工智能深度融合的时代,企业对数据仓库的需求早已超越“查得快”这一基础能力。面对传统数仓挑战,阿里云瑶池数据库AnalyticDB for PostgreSQL(简称ADB-PG)创新性地构建了统一架构下的Shared-Nothing与Shared-Storage双模融合体系,并自主研发Beam混合存储引擎与Laser向量化执行引擎,全面解决HTAP场景下性能、弹性、成本与实时性的矛盾。 近日,相关研究成果发表于在英国伦敦召开的数据库领域顶级会议 VLDB 2025,标志着中国自研云数仓技术再次登上国际舞台。
948 1
|
10月前
|
分布式计算 Serverless OLAP
实时数仓Hologres V3.1版本发布,Serverless型实例从零开始构建OLAP系统
Hologres推出Serverless型实例,支持按需计费、无需独享资源,适合新业务探索分析。高性能查询内表及MaxCompute/OSS外表,弹性扩展至512CU,性能媲美主流开源产品。新增Dynamic Table升级、直读架构优化及ChatBI解决方案,助力高效数据分析。
实时数仓Hologres V3.1版本发布,Serverless型实例从零开始构建OLAP系统
|
10月前
|
存储 SQL 分布式计算
MaxCompute x 聚水潭:基于近实时数仓解决方案构建统一增全量一体化数据链路
聚水潭作为中国领先的电商SaaS ERP服务商,致力于为88,400+客户提供全链路数字化解决方案。其核心ERP产品助力企业实现数据驱动的智能决策。为应对业务扩展带来的数据处理挑战,聚水潭采用MaxCompute近实时数仓Delta Table方案,有效提升数据新鲜度和计算效率,提效比例超200%,资源消耗显著降低。未来,聚水潭将进一步优化数据链路,结合MaxQA实现实时分析,赋能商家快速响应市场变化。
438 0
|
存储 分布式计算 物联网
美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台
美的楼宇科技基于阿里云 EMR Serverless Spark 建设 IoT 数据平台,实现了数据与 AI 技术的有效融合,解决了美的楼宇科技设备数据量庞大且持续增长、数据半结构化、数据价值缺乏深度挖掘的痛点问题。并结合 EMR Serverless StarRocks 搭建了 Lakehouse 平台,最终实现不同场景下整体性能提升50%以上,同时综合成本下降30%。
1056 58
|
存储 人工智能 分布式计算
湖仓实时化升级 :Uniflow 构建流批一体实时湖仓
本文整理自阿里云产品经理李昊哲在Flink Forward Asia 2024流批一体专场的分享,涵盖实时湖仓发展趋势、基于Flink搭建流批一体实时湖仓及Materialized Table优化三方面。首先探讨了实时湖仓的发展趋势和背景,特别是阿里云在该领域的领导地位。接着介绍了Uniflow解决方案,通过Flink CDC、Paimon存储等技术实现低成本、高性能的流批一体处理。最后,重点讲解了Materialized Table如何简化用户操作,提升数据查询和补数体验,助力企业高效应对不同业务需求。
1158 18
湖仓实时化升级 :Uniflow 构建流批一体实时湖仓
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享,主要涵盖四个方面:鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖,解决了Hudi入湖的痛点,并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外,还探讨了湖仓一体平台的落地效果及未来技术发展方向,包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
1861 1
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
987 2

相关产品

  • 云原生数据仓库 AnalyticDB PostgreSQL版
  • 云数据库 RDS PostgreSQL 版
  • 推荐镜像

    更多