AI 助理
备案控制台
开发者社区 数据库 数据仓库 文章 正文

今日14点开播！漫谈传统数仓向云原生数仓的升级与实践

2022-07-21 416
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
阿里云百炼推荐规格 ADB PostgreSQL，4核16GB 100GB 1个月
推荐场景：
构建的企业专属Chatbot
云原生数据仓库AnalyticDB MySQL版，基础版 8ACU 100GB 1个月
简介： 本期将从技术与实践视角来谈谈如何一步升舱。下午14点来一起聊聊吧。

数据库风向标


何谓“升舱”？破解传统数仓带来的业务发展困局，从以往高度限制业务发展的老架构升级为全新云原生架构，阿里云从金融/电信领域多年实践中沉淀出了一套数仓平台建设方法论，称之为“升舱”。阿里云“升舱”计划将传统数仓升级为云原生全新架构，助力企业摆脱技术束缚，加速数智化创新，深度体验“千仓万库，轻云直上”。本期将从技术与实践视角来谈谈如何一步升舱。下午14点来一起聊聊吧。

image.png


《数据库风向标》是一档聚焦数据库新趋势与新技术的视频栏目，节目每期会请到几位资深技术大咖，与大家共话数据库热点话题。


一键预约“视频号”直播


长按识别二维码、关注“阿里云数据库”视频号

预约直播、查看更多一手视讯！

image.png

文章标签：
云原生数据仓库AnalyticDB MySQL版
云原生数据仓库 AnalyticDB PostgreSQL版
Cloud Native
数据库
关键词：
云原生数据仓库AnalyticDB MySQL版实践
云原生实践
云原生数据仓库AnalyticDB MySQL版升级
云原生升级
云原生数据仓库AnalyticDB MySQL版云原生
相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL，玩转SQL开发等功能！本教程介绍如何在AnalyticDB MySQL中，一键加载内置数据集，并基于自动生成的查询脚本，运行复杂查询语句，秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库，高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准，可以对海量数据进行即时的多维分析透视和业务探索，快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
昆仑关十三
目录
相关文章
灵杰开发者
|
3天前
|
SQL 存储 消息中间件
vivo基于Paimon的湖仓一体落地实践
本文整理自vivo互联网大数据专家徐昱在Flink Forward Asia 2024的分享，基于实际案例探讨了构建现代化数据湖仓的关键决策和技术实践。内容涵盖组件选型、架构设计、离线加速、流批链路统一、消息组件替代、样本拼接、查询提速、元数据监控、数据迁移及未来展望等方面。通过这些探索，展示了如何优化性能、降低成本并提升数据处理效率，为相关领域提供了宝贵的经验和参考。
灵杰开发者
278 3
vivo基于Paimon的湖仓一体落地实践
阿里云瑶池数据库SelectDB
|
7天前
|
SQL 分布式计算 数据挖掘
从湖仓分离到湖仓一体，四川航空基于 SelectDB 的多源数据联邦分析实践
川航选择引入 SelectDB 建设湖仓一体大数据分析引擎，取得了数据导入效率提升 3-6 倍，查询分析性能提升 10-18 倍、实时性提升至 5 秒内等收益。
阿里云瑶池数据库SelectDB
18 1
从湖仓分离到湖仓一体，四川航空基于 SelectDB 的多源数据联邦分析实践
灵杰开发者
|
19天前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享，主要涵盖四个方面：鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖，解决了Hudi入湖的痛点，并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外，还探讨了湖仓一体平台的落地效果及未来技术发展方向，包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
灵杰开发者
128 1
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
技术小达人
|
9天前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
技术小达人
29 2
灵杰开发者
|
2月前
|
存储 人工智能 分布式计算
湖仓实时化升级 ：Uniflow 构建流批一体实时湖仓
本文整理自阿里云产品经理李昊哲在Flink Forward Asia 2024流批一体专场的分享，涵盖实时湖仓发展趋势、基于Flink搭建流批一体实时湖仓及Materialized Table优化三方面。首先探讨了实时湖仓的发展趋势和背景，特别是阿里云在该领域的领导地位。接着介绍了Uniflow解决方案，通过Flink CDC、Paimon存储等技术实现低成本、高性能的流批一体处理。最后，重点讲解了Materialized Table如何简化用户操作，提升数据查询和补数体验，助力企业高效应对不同业务需求。
灵杰开发者
456 18
湖仓实时化升级 ：Uniflow 构建流批一体实时湖仓
技术小达人
|
9天前
|
运维 Kubernetes Cloud Native
云栖实录 | 智能运维：云原生大规模集群GitOps实践
云栖实录 | 智能运维：云原生大规模集群GitOps实践
技术小达人
22 1
技术小达人
|
9天前
|
存储 分布式计算 数据处理
湖仓实时化升级 ：Uniflow 构建流批一体实时湖仓
湖仓实时化升级 ：Uniflow 构建流批一体实时湖仓
技术小达人
33 1
技术小达人
|
9天前
|
存储 分布式数据库 Apache
小米基于 Apache Paimon 的流式湖仓实践
小米基于 Apache Paimon 的流式湖仓实践
技术小达人
16 0
小米基于 Apache Paimon 的流式湖仓实践
灵杰开发者
|
12天前
|
存储 分布式数据库 Apache
小米基于 Apache Paimon 的流式湖仓实践
本文整理自Flink Forward Asia 2024流式湖仓专场分享，由计算平台软件研发工程师钟宇江主讲。内容涵盖三部分：1）背景介绍，分析当前实时湖仓架构（如Flink + Talos + Iceberg）的痛点，包括高成本、复杂性和存储冗余；2）基于Paimon构建近实时数据湖仓，介绍其LSM存储结构及应用场景，如Partial-Update和Streaming Upsert，显著降低计算和存储成本，简化架构；3）未来展望，探讨Paimon在流计算中的进一步应用及自动化维护服务的建设。
灵杰开发者
44 0
小米基于 Apache Paimon 的流式湖仓实践
技术小达人
|
2月前
|
人工智能 关系型数据库 MySQL
AnalyticDB MySQL版：云原生离在线一体化数据仓库支持实时业务决策
AnalyticDB MySQL版是阿里云推出的云原生离在线一体化数据仓库，支持实时业务决策。产品定位为兼具数据库应用性和大数据处理能力的数仓，适用于大规模数据分析场景。核心技术包括混合负载、异构加速、智能弹性与硬件优化及AI集成，支持流批一体架构和物化视图等功能，帮助用户实现高效、低成本的数据处理与分析。通过存算分离和智能调度，AnalyticDB MySQL可在复杂查询和突发流量下提供卓越性能，并结合AI技术提升数据价值挖掘能力。
技术小达人
69 16
数据库

数据仓库

热门文章

最新文章

  • 1
    快数据时代如何构建实时数据仓库，AnalyticDB for MySQL告诉你
  • 2
    LangChain+通义千问+AnalyticDB向量引擎保姆级教程
  • 3
    ClickHouse物化视图里常见的7个坑，点进看避坑指南
  • 4
    云原生时代的架构革新，Apache Doris 存算分离如何实现弹性与性能双重提升
  • 5
    AnalyticDB for MySQL：AI时代实时数据分析的最佳选择
  • 6
    深度｜大模型时代下，基于湖仓一体的数据智能新范式
  • 7
    ClickHouse内核分析-ZooKeeper在分布式集群中的作用以及ReplicatedMergeTree表引擎的实现
  • 8
    云栖大会｜AI+Data，新一代智能数仓的实践与畅想
  • 9
    一键实现穿衣自由，揭秘淘宝AI试衣间硬核技术，AnalyticDB向量在线召回
  • 10
    新手避坑：盘点使用ClickHouse最容易犯的12个错误
  • 1
    云原生时代的架构革新，Apache Doris 存算分离如何实现弹性与性能双重提升
    35
  • 2
    Apache Doris 3.0.4 版本正式发布
    26
  • 3
    从湖仓分离到湖仓一体，四川航空基于 SelectDB 的多源数据联邦分析实践
    18
  • 4
    云原生数据仓库AnalyticDB PostgreSQL同一个SQL可以实现向量索引、全文索引GIN、普通索引BTREE混合查询，简化业务实现逻辑、提升查询性能
    29
  • 5
    数据无界、湖仓无界，Apache Doris 湖仓一体典型场景实战指南（下篇）
    35
  • 6
    数据无界、湖仓无界， Apache Doris 湖仓一体解决方案全面解读（上篇）
    65
  • 7
    从 ClickHouse 到 Apache Doris：在网易云音乐日增万亿日志数据场景下的落地
    82
  • 8
    湖仓分析｜浙江霖梓基于 Doris + Paimon 打造实时/离线一体化湖仓架构
    54
  • 9
    Apache Doris 2.1.8 版本正式发布
    85
  • 10
    金融场景 PB 级大规模日志平台：中信银行信用卡中心从 Elasticsearch 到 Apache Doris 的先进实践
    95

    • 相关产品

  • 云原生数据仓库AnalyticDB MySQL版
    文档详情 产品详情

    • 相关课程

    更多
  • 云计算、容器和云原生基础课程
  • ALPD云架构师系列：云原生DevOps 36计 -阿里云云效出品
  • 云原生实践公开课
  • 云原生基础概念及阿里云云原生产品介绍
  • CNCF Alibaba 云原生技术公开课
  • Kubernetes云原生管理实践

    • 相关电子书

    更多
  • 阿里云云原生技术实践营 | 上海站
  • 阿里云云原生 Serverless 技术实践营西安站材料合集
  • 智算时代，基于 Kubernetes 落地云原生 AI

    • 相关实验场景

    更多
  • 通过云原生API网关实现Token管控
  • 通过云原生API网关进行AI缓存
  • 通过云原生API网关搭建聊天机器人
  • 通过云原生API网关进行AI应用防护
  • 基于Hologres轻量实时的高性能OLAP分析
  • 云原生场景自动化响应ECS系统事件
    • 下一篇
    通义万相2.1视频/图像模型新升级！可在阿里云百炼直接体验