带你读《升舱 - 数据仓库升级交付标准白皮书》——2.1 数仓升级的三个目标

本文涉及的产品
云原生数据仓库AnalyticDB MySQL版,基础版 8ACU 100GB 1个月
简介: 带你读《升舱 - 数据仓库升级交付标准白皮书》——2.1 数仓升级的三个目标

2、数仓升级成功的关键点


通过多个数仓升级项目实践总结及复盘,要一次性把事情做对,完成一次成功的传统数 仓平台升级实施工作难度不亚于飞机在空中更换发动机。总体来看,造成数仓升级实施 难度系数较大的原因主要体现在三个层面:技术方案、迁移方法、实施资源。


在技术方案上,需要对每个技术关键点都能考虑周全,深入探索每个技术细节并进行充 分的论证和测试;在迁移方法上,需要科学完善的实施方法论,充分考虑迁移项目的工 程特点和平滑过渡目标,把迁移风险做到可识别、可分析、可预测、可防范;在实施资 源上,不仅需要团队对于新技术具有前瞻性认知和把控能力,更需要对原有数仓体系的 盘根错节有深入了解,能够在风险发生时从技术、方案、业务等不同层面提出应对方案, 及时化解风险。


管理学大师德鲁克认为,并不是有了工作才有目标,而是相反,有了目标才能确定每个 人的工作。为了成功实施数据仓库升级的既定目标,提升升级交付效率与质量,需要秉 持“三个目标、四个原则,五个关键动作”标准,下文将基于此标准并结合实践案例详 细阐述,图谱如下图所示:


image.png



2.1 数仓升级的三个目标


从我们的调研和实践来看,数据仓库升级不仅仅是一个技术问题,也是一个工程问题, 对企业和实施厂商的协调组织、项目管理、技术掌控、交付能力等提出了全方位考验。 基于实践,我们总结出“数仓升级稳定模型”(图 3),实现数仓升级需要从三方面进 行要素搭建:业务敏捷响应、降本提效、自主开放。


image.png


首先,数据仓库具备业务敏捷响应支撑能力,该能力可以有效应对当今时代业务发展不 确定性和互联网固有特征。相对于传统数据仓库平台升级,则需要考虑具备兼容传统数 仓平台的所有业务处理能力,而兼顾所有业务的同时也带来了问题百出和处理问题低效 的现象。所以,业务敏捷响应可以有效的节约时间实现数据的迁移、抓取等操作,数仓 升级让业务处理更高效。


其次,通过数仓升级可以有效的降低数据仓库的整体拥有成本。长期以来由于国外数据 仓库厂商在数仓建设上存在某种程度的不可替代性,数据仓库市场一直是个卖方市场。 据全球权威 IT 研究与顾问咨询公司 Gartner 公司评测,在数据库领导者象限的某数据 仓库厂商,对应项目基本都是千万级起步,这还不涵盖每年固定支出的高昂服务支持费 用在内;因此,我们希望通过使用成熟的产品、工具和方法论指导降低数据仓库升级和 后期维护整体拥有成本(TCO)。


此外,数仓升级可以打破国外厂商的数据仓库平台的技术封闭性问题,实现技术的自主 可控。传统国外厂商的数据仓库平台均为软硬一体机的输出模式,且一体机中的网络、 存储等对于用户来说是个黑盒;而且随着大数据技术的发展,无法有效与通用大数据技 术体系进行有效融合。因此升级传统数据仓库平台需要保持开放性、以自主可控为重要 目标进行升级,赋能企业的数字化转型。

相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL,玩转SQL开发等功能!本教程介绍如何在AnalyticDB MySQL中,一键加载内置数据集,并基于自动生成的查询脚本,运行复杂查询语句,秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
5月前
|
存储 数据挖掘 BI
数据仓库深度解析与实时数仓应用案例探析
随着数据量的不断增长和数据应用的广泛深入,数据治理和隐私保护将成为数据仓库建设的重要议题。企业需要建立完善的数据治理体系,确保数据的准确性、一致性和完整性;同时加强隐私保护机制建设,确保敏感数据的安全性和合规性。
621 55
|
4月前
|
消息中间件 存储 大数据
大数据-数据仓库-实时数仓架构分析
大数据-数据仓库-实时数仓架构分析
155 1
|
6月前
|
Cloud Native 数据管理 OLAP
云原生数据仓库AnalyticDB产品使用合集之是否可以创建表而不使用分区
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
412 2
云原生数据仓库AnalyticDB产品使用合集之是否可以创建表而不使用分区
|
6月前
|
Cloud Native 关系型数据库 MySQL
《阿里云产品四月刊》—云原生数据仓库 AnalyticDB MySQL 版 新功能
阿里云瑶池数据库云原生化和一体化产品能力升级,多款产品更新迭代
112 3
|
5月前
|
存储 消息中间件 数据挖掘
数据仓库的深度探索与实时数仓应用案例解析
大数据技术的发展,使得数据仓库能够支持大量和复杂数据类型(如文本、图像、视频、音频等)。数据湖作为一种新的数据存储架构,强调原始数据的全面保留和灵活访问,与数据仓库形成互补,共同支持企业的数据分析需求。
|
6月前
|
存储 SQL Cloud Native
云原生数据仓库AnalyticDB产品使用合集之热数据存储空间在什么地方查看
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
123 4
|
6月前
|
SQL Cloud Native 关系型数据库
云原生数据仓库AnalyticDB操作报错合集之执行sql的进程报错:"unknown connection id",是什么导致的
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
817 3
|
6月前
|
SQL Cloud Native 关系型数据库
云原生数据仓库AnalyticDB操作报错合集之报错代码"[31004, 2023121817001319216817200303151051107] : Compiler failed and interpreter is disabled"是什么导致的
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
731 3
|
6月前
|
存储 监控 Cloud Native
云原生数据仓库AnalyticDB产品使用合集之如何添加索引
阿里云AnalyticDB提供了全面的数据导入、查询分析、数据管理、运维监控等功能,并通过扩展功能支持与AI平台集成、跨地域复制与联邦查询等高级应用场景,为企业构建实时、高效、可扩展的数据仓库解决方案。以下是对AnalyticDB产品使用合集的概述,包括数据导入、查询分析、数据管理、运维监控、扩展功能等方面。
389 2
|
2月前
|
人工智能 自然语言处理 关系型数据库
阿里云云原生数据仓库 AnalyticDB PostgreSQL 版已完成和开源LLMOps平台Dify官方集成
近日,阿里云云原生数据仓库 AnalyticDB PostgreSQL 版已完成和开源LLMOps平台Dify官方集成。

热门文章

最新文章

下一篇
DataWorks