阿里云与Alluxio达成技术合作,携手提供离在线一体化数据分析服务

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
云数据库 Tair(兼容Redis),内存型 2GB
简介: 有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗


image.png

Alluxio ✖️  阿里云

近日,开源云数据编排软件开发商 Alluxio 与阿里云达成技术合作,其核心产品 Alluxio 数据编排平台将与阿里云云原生数据仓库 AnalyticDB 集成,有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗。

Alluxio

相较存储和计算耦合的架构,Alluxio 数据编排技术产品基于存储计算分离架构。存储计算分离可以带来诸多好处,例如允许独立扩展计算和存储、提高资源的利用率、提高业务的灵活性等。特别是借助云上的基础设施,存储可以选择更为便宜的对象存储 OSS 以及其它混合存储,计算资源可以按需付费和弹性扩缩容,这些都使得存储计算分离架构更好的发挥云计算的成本优势和灵活性。但是,在存储计算分离的场景下,通过网络从远端存储读取数据仍然是一个代价较大的操作,往往会带来性能的损耗。

阿里云

阿里云云原生数据仓库 AnalyticDB ,采取计算与存储完全分离的架构,通过跟 Alluxio 的技术合作,实现存储分层服务化,减少从远端读取数据带来的延时和 IO 限制,实现更小的查询延时和更高的吞吐,有效支持对用户存储在 OSS、HDFS 等介质上的各种文件格式进行 Adhoc 查询、BI 分析、轻量级 ETL 等数据分析工作。经 TPC-H 1TB 数据测试,查询性能普遍提升1倍以上。

阿里云数据库产品事业部 OLAP 产品部负责人占超群表示

“云原生数据仓库 AnalyticDB 一直致力于提供云原生和离在线一体化的数据分析服务,助力企业实现数据驱动业务发展。很高兴 AnalyticDB 与 Alluxio 的技术合作,这次合作将提供高性价比的扩展数据分析能力,助力用户实现更全域、更高效的数据价值探索。”

Alluxio 业务拓展副总裁孙玮表示

“此次,Alluxio与阿里云云原生数据仓库  AnalyticDB 产品的深度集成,将帮助更多业务上云的企业,能够更加快速、便捷地访问数据,获取可用于决策的分析结果,同时,还能获得更可靠的SLA和更低的数据成本,我们很高兴能够与阿里云达成技术合作,共同推动企业在数据计算与分析领域的效率提升。”

携手展望

在数据上云的大背景下,随着网络和存储硬件能力的提升,存储计算分离逐渐成为了大数据处理的重要趋势。阿里云将与 Alluxio 携手为客户构建高效的大数据技术平台以及离在线一体化的数据分析服务,同时实现降本增效。未来阿里云将携手更多生态伙伴,助力企业更高效的挖掘商机。

相关实践学习
AnalyticDB MySQL海量数据秒级分析体验
快速上手AnalyticDB MySQL,玩转SQL开发等功能!本教程介绍如何在AnalyticDB MySQL中,一键加载内置数据集,并基于自动生成的查询脚本,运行复杂查询语句,秒级生成查询结果。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
NoSQL 大数据 分布式数据库
|
3月前
|
存储 分布式计算 大数据
阿里云 EMR 强势助力,与阿里云大数据体系共创辉煌,把握时代热点,开启生态建设之旅
【8月更文挑战第26天】阿里云EMR(Elastic MapReduce)是一种大数据处理服务,与阿里云的多个服务紧密结合,共同构建了完善的大数据生态系统。EMR与对象存储服务(OSS)集成,利用OSS提供可靠、低成本且可扩展的数据存储;与MaxCompute集成,实现深度数据分析和挖掘;还支持数据湖构建服务,加速数据湖的搭建并简化数据管理与分析过程。EMR提供多种编程接口及工具,如Hive、Spark和Flink等,帮助用户高效完成大数据处理任务。
105 2
|
3月前
|
人工智能 分布式计算 架构师
大数据及AI典型场景实践问题之基于MaxCompute构建Noxmobi全球化精准营销系统如何解决
大数据及AI典型场景实践问题之基于MaxCompute构建Noxmobi全球化精准营销系统如何解决
|
6月前
|
存储 关系型数据库 测试技术
印尼医疗龙头企业Halodoc的数据平台转型之Lakehouse架构
印尼医疗龙头企业Halodoc的数据平台转型之Lakehouse架构
84 4
|
存储 JSON 分布式计算
一体化大数据智能计算平台 ODPS 产品年度发布
阿里云ODPS全新升级,存储、调度、元数据一体化融合 ,从 Processing 升级为 Platform,即 Open Data Platform and Service。本次峰会,同步发布了新的产品能力,即MaxCompute 引擎新功能发布及Hologres 引擎新功能发布。
一体化大数据智能计算平台 ODPS 产品年度发布
|
存储 分布式计算 Cloud Native
oushudb丨案例分析 丨湖仓一体助力保险企业数据战略转型升级
oushudb丨案例分析 丨湖仓一体助力保险企业数据战略转型升级
139 0
|
存储 数据采集 弹性计算
《使用阿里云神策联合解决方案搭建大数据运营平台》| 学习笔记
快速学习《使用阿里云神策联合解决方案搭建大数据运营平台》
225 0
|
SQL 消息中间件 运维
工商银行实时大数据平台建设历程及展望
中国工商银行大数据平台负责人袁一在 FFA 2021 的分享
工商银行实时大数据平台建设历程及展望
|
存储 Cloud Native 数据挖掘
阿里云与Alluxio达成技术合作,携手提供离在线一体化数据分析服务
有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗
603 0
阿里云与Alluxio达成技术合作,携手提供离在线一体化数据分析服务
|
存储 数据采集 分布式计算
连载:阿里巴巴大数据实践—实时技术
相对于离线批处理技术,流式实时处理技术作为一个非常重要的技术补充,在阿里巴巴集团内被广泛使用。
4179 0
连载:阿里巴巴大数据实践—实时技术