数据仓库
阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。
干货 | 云原生数仓如何破解大规模集群的关联查询性能问题?
近年来,数据库系统服务的数据量呈指数级增长,同时也面临处理的业务需求愈发复杂、实时性要求越来越高等挑战。单机数据库系统已经逐渐不能满足现代的数据库服务要求,因此分布式数据库/数据仓库得到了越来越广泛地运用。
云原生数仓如何破解大规模集群的关联查询性能问题?
本文从ADB PG架构设计的角度出发,探讨Runtime Filter在ADB PG中的实现方案,并介绍了基于Bloom Filter的ADB PG Dynamic Join Filter功能技术细节。
中再集团引入阿里云AnalyticDB云原生数仓,助力保险合同新准则项目建设
本次阿里云和中再集团通力协作,全面验证了阿里云AnalyticDB过硬的产品能力和专业服务水平,为持续推进数字中再战略规划落地打下坚实基础,也为国内金融同业构建新一代数据平台树立了参考标杆。
一份【疫情礼包】请查收,云数据仓库AnalyticDB PostgreSQL为中国企业加油
疫情肆虐下,企业的生存面临着前所未有的挑战。 AnalyticDB PostgreSQL 希望为中国企业贡献一份力量!
基于AnalyticDB PostgreSQL + OSS + SLS构建面向应用内行为数据的分析全链路
AnalyticDB PostgreSQL助力某互联网企业完成数仓建设和面向用户行为的全链路分析。通过Serverless版本的性能助力,轻松实现了10+的性价比提升。
从Cloud-Hosted到Cloud-Native,AnalyticDB PostgreSQL数据仓库的云原生实践
阿里云在2021云栖大会上,预告了全新云原生架构的数据仓库【1】。本文介绍了云原生数据仓库产品AnalyticDB PostgreSQL(以下简称ADB PG)从Cloud-Hosted到Cloud-Native的演进探索,探讨为了实现真正的资源池化和灵活售卖的底层设计和思考,涵盖内容包括产品的架构设计,关键技术,性能结果,效果实现和后续计划几方面。
云原生数据仓库下的“降本增效”之路怎么走?
智能建模诊断与优化是AnalyticDB继智能数据查询诊断与优化后,推出的又一个智能诊断系列,本次发布的冷热数据分层智能推荐和无效索引删除智能推荐2个功能,主要是从低频使用的热表转冷表减少热存空间,删除无效索引维度减少存储空间,最终降低存储成本。后续还将发布分布键智能推荐功能帮助客户通过优化分布键,提供Join/GroupBy等场景的查询性能。
AnalyticDB PostgreSQL数据共享
随着精细化运营的深入,企业内多业务间的数据关联分析越来越复杂,比如数据在业务上下游之间传递,或者一份公共数据被多个业务共用。为确保各自业务的隔离性和资源独享,企业倾向在云上创建多业务实例并独立管理。那么想要进行同一份数据的流转,就需要将数据在实例间进行多次复制,极大的降低了企业分析效率并增加数据运维的复杂度。在数据移动的过程中,也会出现数据冗余,数据不一致,数据缺乏实效性,甚至数据正确性的问题。由于复杂的数据流转成本,企业迟迟无法真正打破数据孤岛。AnalyticDB PostgreSQL版率先在国内推出数据共享能力,使构建在ADB PG上的数仓可以安全、快速的构建实例间的实时数据共享,无需任何数据移动。数据共享能力缓解了企业为避免数据隔离而进行的架构的过度设计,现在企业可以面向业务进行Serverless的资源创建,而当业务需要进行关联数据分析时,可快速创建数据共享,秒级实现数据的打通,彻底解决数据规划难,流转难,运维难的问题,从平台层助力打破数据孤岛。
云原生数据仓库下的“降本增效”之路怎么走?
智能建模诊断与优化是AnalyticDB继智能数据查询诊断与优化后,推出的又一个智能诊断系列,本次发布的冷热数据分层智能推荐和无效索引删除智能推荐2个功能,主要是从低频使用的热表转冷表减少热存空间,删除无效索引维度减少存储空间,最终降低存储成本。后续还将发布分布键智能推荐功能帮助客户通过优化分布键,提供Join/GroupBy等场景的查询性能。
AnalyticDB MySQL版重磅发布智能建模诊断与优化功能
云原生数据仓库AnalyticDB MySQL版提供的智能建模诊断与优化功能,主要分为「冷热数据优化」、「无效索引优化」、「分布键优化」三大功能,目的是帮助客户降低数据/索引的存储成本,提高Join场景性能。
韵达与阿里云宣布共建智慧物流数据库创新应用中心
3月1日,综合快递物流服务商韵达与阿里云在上海宣布成立“智慧物流数据库创新应用中心”,共同探索推进分布式数据库在智慧物流核心系统中的深度应用。
双11特刊 | 迎难而上,支撑350亿次在线查询的数据仓库是怎样炼成的?
阿里云数据库已连续多年稳定支撑天猫双11,历经极端流量场景淬炼。除了保障稳定顺滑的基本盘,今年大促期间数据库通过全面云原生化,大幅提升用户体验,让技术帮助业务产生更有价值的消费者体验,持续通过技术创新赋能用户,引领技术发展路径。 双11已圆满落幕,但技术的探索,仍未止步。 “阿里云数据库” 公众号特此推出《好科技的新起点——2021双11阿里云数据库技术揭秘》系列干货文章,为你讲述年度“技术大考”背后的故事,敬请关注!
双11专刊|云原生数据仓库AnalyticDB支撑双11,大幅提升分析实时性和用户体验
2021年双十一刚刚落幕,已连续多年稳定支持双十一大促的云原生数据仓库AnalyticDB,今年双十一期间仍然一如既往的稳定。除了稳定顺滑的基本盘之外,AnalyticDB还有什么亮点呢?下面我们来一一揭秘。
前沿分享|数澜科技联合创始人&副总裁 江敏:基于云原生数据仓库AnalyticDB PostgreSQL的最佳实践
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,数澜科技联合创始人&副总裁江敏关于“基于云原生数据仓库AnalyticDB PostgreSQL的最佳实践”的分享。
前沿分享|阿里云资深技术专家 魏闯先:AnalyticDB PostgreSQL年度新版本发布
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云资深技术专家 魏闯先关于“AnalyticDB PostgreSQL年度新版本发布”的分享。
前沿分享|阿里云数据库解决方案架构师 王宏宇:云原生数据仓库AnalyticDB在零售行业的深度应用和业务价值
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云数据库解决方案架构师 王宏宇关于“云原生数据仓库AnalyticDB在零售行业的深度应用和业务价值”的分享。
前沿分享|阿里云数据库资深技术专家 姚奕玮:AnalyticDB MySQL离在线一体化技术揭秘
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云数据库资深技术专家 姚奕玮关于“AnalyticDB MySQL离在线一体化技术揭秘”的分享。
全网首发|阿里资深技术专家数仓调优经验分享(下)
随着云原生数据仓库AnalyticDB for MySQL(下文统一简称:AnalyticDB)在阿里集团各个业务线、社会上各行各业的推广应用,我们沉淀了一些最佳实践,现在笔者整理在这里,供大家参考,希望对大家有帮助。本篇文章总结了AnalyticDB表的设计的最佳经验、数据写入的最佳经验、高效查询的最佳实践,以及一些常见的问题。
AnalyticDB for PG on DBStack架构详解
ADB PG是基于Greenplum基础上自研的分析型数据库,Greenplum是典型的shared-nothing架构,在线下金融证券行业应用广泛,那么是我们如何让客户能够在线下场景低成本的享有与公共云相同的产品能力呢?议题主要介绍DBStack For ADBPG产品的架构设计,详解我们是如何实现3台最小化部署的规模是的客户,可以使用上ADBPG产品的。讲师/嘉宾简介方锋华,现任阿里云ADB PG产品技术团队负责人,数据库产品技术高级技术专家。2016年加入阿里云专注数据库专注于容器技术在数据库领域的使用,主导和推动了阿里云数据的全面容器和K8S化的云原生管控系统的设计和开发,2020年开始负责ADBPG产品技术,推动ADBPG产品全面云原生,主导数据库混合云产品DBStack For ADBPG版本研发,在数据库、云计算领域有丰富的工作经验和技术积累。
AnalyticDB云原生架构技术揭秘
ADB PG是基于Greenplum基础上自研的分析型数据库,Greenplum是典型的shared-nothing架构,在线下金融证券行业应用广泛,如何基于云上资源池化能力,把shared-nothing架构改造成存储计算分离,存储计算独立按需扩缩的云原生架构,并保留它的事务能力,以及周边工具生态兼容的能力,ADB PG云原生架构给出一种新的实践。讲师/嘉宾简介陆元飞,花名翰明,2006年毕业于华南理工大学应用数学学院,原华为主任工程师,作为华为分布式数据库taurus核心研发,2018年加入阿里后,负责ADB向量版,产品在个性化推荐,图搜,安防领域得到大规模应用,研究成果发布在VLDB;2020年开始负责ADB PG云原生架构,实现存储计算分离,产品在公有云上线实现从零到一。
重磅 | 「申万宏源」引入阿里云数据仓库AnalyticDB,打造数据驱动新引擎
日前,国内券商行业龙头企业申万宏源证券完成从传统商业数据仓库Teradata到阿里云云原生数据仓库AnalyticDB的平滑升级,实现了大数据分析、大赢家官方APP、报表分析等混合业务应用场景支持,同时在达到安全可控的前提下,实现了成本和风险双降,效率和能力大幅提升的目标。
双11专刊|云原生数据仓库AnalyticDB支撑双11,大幅提升分析实时性和用户体验
2021年双十一刚刚落幕,已连续多年稳定支持双十一大促的云原生数据仓库AnalyticDB,今年双十一期间仍然一如既往的稳定。除了稳定顺滑的基本盘之外,AnalyticDB还有什么亮点呢?下面我们来一一揭秘。
前沿分享|数澜科技联合创始人&副总裁 江敏:基于云原生数据仓库AnalyticDB PostgreSQL的最佳实践
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,数澜科技联合创始人&副总裁江敏关于“基于云原生数据仓库AnalyticDB PostgreSQL的最佳实践”的分享。
前沿分享|阿里云资深技术专家 魏闯先:AnalyticDB PostgreSQL年度新版本发布
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云资深技术专家 魏闯先关于“AnalyticDB PostgreSQL年度新版本发布”的分享。
前沿分享|阿里云数据库解决方案架构师 王宏宇:云原生数据仓库AnalyticDB在零售行业的深度应用和业务价值
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云数据库解决方案架构师 王宏宇关于“云原生数据仓库AnalyticDB在零售行业的深度应用和业务价值”的分享。
前沿分享|阿里云数据库资深技术专家 姚奕玮:AnalyticDB MySQL离在线一体化技术揭秘
本篇内容为2021云栖大会-云原生数据仓库AnalyticDB技术与实践峰会分论坛中,阿里云数据库资深技术专家 姚奕玮关于“AnalyticDB MySQL离在线一体化技术揭秘”的分享。
技术干货|基于Apache Hudi 的CDC数据入湖「内附干货PPT下载渠道」
阿里云技术专家李少锋(风泽)在Apache Hudi 与 Apache Pulsar 联合 Meetup 杭州站上的演讲整理稿件,本议题将介绍典型 CDC 入湖场景,以及如何使用 Pulsar/Hudi 来构建数据湖,同时将会分享 Hudi 内核设计、新愿景以及社区最新动态。