阿里云与Alluxio达成技术合作,携手提供离在线一体化数据分析服务

简介: 有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗


12.png

Alluxio ✖️  阿里云

近日,开源云数据编排软件开发商 Alluxio 与阿里云达成技术合作,其核心产品 Alluxio 数据编排平台将与阿里云云原生数据仓库 AnalyticDB 集成,有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗。

Alluxio

相较存储和计算耦合的架构,Alluxio 数据编排技术产品基于存储计算分离架构。存储计算分离可以带来诸多好处,例如允许独立扩展计算和存储、提高资源的利用率、提高业务的灵活性等。特别是借助云上的基础设施,存储可以选择更为便宜的对象存储 OSS 以及其它混合存储,计算资源可以按需付费和弹性扩缩容,这些都使得存储计算分离架构更好的发挥云计算的成本优势和灵活性。但是,在存储计算分离的场景下,通过网络从远端存储读取数据仍然是一个代价较大的操作,往往会带来性能的损耗。

阿里云

阿里云云原生数据仓库 AnalyticDB ,采取计算与存储完全分离的架构,通过跟 Alluxio 的技术合作,实现存储分层服务化,减少从远端读取数据带来的延时和 IO 限制,实现更小的查询延时和更高的吞吐,有效支持对用户存储在 OSS、HDFS 等介质上的各种文件格式进行 Adhoc 查询、BI 分析、轻量级 ETL 等数据分析工作。经 TPC-H 1TB 数据测试,查询性能普遍提升1倍以上。

阿里云数据库产品事业部 OLAP 产品部负责人占超群表示

“云原生数据仓库 AnalyticDB 一直致力于提供云原生和离在线一体化的数据分析服务,助力企业实现数据驱动业务发展。很高兴 AnalyticDB 与 Alluxio 的技术合作,这次合作将提供高性价比的扩展数据分析能力,助力用户实现更全域、更高效的数据价值探索。”

Alluxio 业务拓展副总裁孙玮表示

“此次,Alluxio与阿里云云原生数据仓库  AnalyticDB 产品的深度集成,将帮助更多业务上云的企业,能够更加快速、便捷地访问数据,获取可用于决策的分析结果,同时,还能获得更可靠的SLA和更低的数据成本,我们很高兴能够与阿里云达成技术合作,共同推动企业在数据计算与分析领域的效率提升。”

携手展望


在数据上云的大背景下,随着网络和存储硬件能力的提升,存储计算分离逐渐成为了大数据处理的重要趋势。阿里云将与 Alluxio 携手为客户构建高效的大数据技术平台以及离在线一体化的数据分析服务,同时实现降本增效。未来阿里云将携手更多生态伙伴,助力企业更高效的挖掘商机。

相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
目录
相关文章
|
2月前
|
数据可视化 大数据 关系型数据库
基于python大数据技术的医疗数据分析与研究
在数字化时代,医疗数据呈爆炸式增长,涵盖患者信息、检查指标、生活方式等。大数据技术助力疾病预测、资源优化与智慧医疗发展,结合Python、MySQL与B/S架构,推动医疗系统高效实现。
|
5月前
|
SQL 人工智能 自然语言处理
AI技术究竟怎样让企业数据分析效率和智能化大幅提升?
本文三桥君介绍了AI驱动的自然语言数据分析系统,通过AI Agents调度、大模型(LLM)生成SQL及检索增强(RAG)技术,实现从自然语言指令到可视化结果的全流程自动化。
185 4
|
机器学习/深度学习 搜索推荐 算法
技术感悟之数据分析的演变与未来
本文探讨了数据分析技术的发展历程,从简单的数据收集到复杂的机器学习算法,揭示了技术进步对商业决策、科学研究和社会发展的深远影响。同时,文章也展望了数据分析在未来可能的发展方向和挑战。
|
数据采集 机器学习/深度学习 数据可视化
构建高效数据分析系统的关键技术
【10月更文挑战第5天】构建高效数据分析系统的关键技术
214 0
|
10月前
|
存储 分布式计算 大数据
基于阿里云大数据平台的实时数据湖构建与数据分析实战
在大数据时代,数据湖作为集中存储和处理海量数据的架构,成为企业数据管理的核心。阿里云提供包括MaxCompute、DataWorks、E-MapReduce等在内的完整大数据平台,支持从数据采集、存储、处理到分析的全流程。本文通过电商平台案例,展示如何基于阿里云构建实时数据湖,实现数据价值挖掘。平台优势包括全托管服务、高扩展性、丰富的生态集成和强大的数据分析工具。
|
SQL 数据采集 数据可视化
深入 Python 数据分析:高级技术与实战应用
本文系统地介绍了Python在高级数据分析中的应用,涵盖数据读取、预处理、探索及可视化等关键环节,并详细展示了聚类分析、PCA、时间序列分析等高级技术。通过实际案例,帮助读者掌握解决复杂问题的方法,提升数据分析技能。使用pandas、matplotlib、seaborn及sklearn等库,提供了丰富的代码示例,便于实践操作。
334 64
|
12月前
|
数据挖掘 OLAP BI
OLAP技术:数据分析的修仙秘籍初探
OLAP(联机分析处理)是一种多维数据分析技术,能够从不同角度洞察数据,揭示隐藏的趋势和模式。它最早由Edgar F. Codd在1993年提出,旨在弥补传统OLTP系统的不足,支持复杂的数据分析与决策支持。OLAP操作包括钻取、上卷、切片、切块和旋转等,帮助用户灵活地探索数据。广泛应用于财务报告、市场分析、库存管理和预测分析等领域,是现代商业智能的重要工具。
335 7
|
机器学习/深度学习 算法 数据挖掘
技术感悟之数据分析的奇妙旅程
这篇文章旨在分享我在数据分析领域的探索和心得。通过深入浅出的方式,带领读者了解数据分析的核心概念、工具和应用。希望这些分享能帮助大家更好地理解和应用数据分析,为生活和工作带来更多便利和价值。
|
SQL 分布式计算 数据挖掘
加速数据分析:阿里云Hologres在实时数仓中的应用实践
【10月更文挑战第9天】随着大数据技术的发展,企业对于数据处理和分析的需求日益增长。特别是在面对海量数据时,如何快速、准确地进行数据查询和分析成为了关键问题。阿里云Hologres作为一个高性能的实时交互式分析服务,为解决这些问题提供了强大的支持。本文将深入探讨Hologres的特点及其在实时数仓中的应用,并通过具体的代码示例来展示其实际应用。
774 0
|
机器学习/深度学习 数据采集 数据可视化
基于爬虫和机器学习的招聘数据分析与可视化系统,python django框架,前端bootstrap,机器学习有八种带有可视化大屏和后台
本文介绍了一个基于Python Django框架和Bootstrap前端技术,集成了机器学习算法和数据可视化的招聘数据分析与可视化系统,该系统通过爬虫技术获取职位信息,并使用多种机器学习模型进行薪资预测、职位匹配和趋势分析,提供了一个直观的可视化大屏和后台管理系统,以优化招聘策略并提升决策质量。
859 4

热门文章

最新文章