阿里云与Alluxio达成技术合作,携手提供离在线一体化数据分析服务

简介: 有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗


image.png

Alluxio ✖️  阿里云

近日,开源云数据编排软件开发商 Alluxio 与阿里云达成技术合作,其核心产品 Alluxio 数据编排平台将与阿里云云原生数据仓库 AnalyticDB 集成,有效解决存储计算分离场景下从异构数据源读取数据带来的性能损耗。

Alluxio

相较存储和计算耦合的架构,Alluxio 数据编排技术产品基于存储计算分离架构。存储计算分离可以带来诸多好处,例如允许独立扩展计算和存储、提高资源的利用率、提高业务的灵活性等。特别是借助云上的基础设施,存储可以选择更为便宜的对象存储 OSS 以及其它混合存储,计算资源可以按需付费和弹性扩缩容,这些都使得存储计算分离架构更好的发挥云计算的成本优势和灵活性。但是,在存储计算分离的场景下,通过网络从远端存储读取数据仍然是一个代价较大的操作,往往会带来性能的损耗。

阿里云

阿里云云原生数据仓库 AnalyticDB ,采取计算与存储完全分离的架构,通过跟 Alluxio 的技术合作,实现存储分层服务化,减少从远端读取数据带来的延时和 IO 限制,实现更小的查询延时和更高的吞吐,有效支持对用户存储在 OSS、HDFS 等介质上的各种文件格式进行 Adhoc 查询、BI 分析、轻量级 ETL 等数据分析工作。经 TPC-H 1TB 数据测试,查询性能普遍提升1倍以上。

阿里云数据库产品事业部 OLAP 产品部负责人占超群表示

“云原生数据仓库 AnalyticDB 一直致力于提供云原生和离在线一体化的数据分析服务,助力企业实现数据驱动业务发展。很高兴 AnalyticDB 与 Alluxio 的技术合作,这次合作将提供高性价比的扩展数据分析能力,助力用户实现更全域、更高效的数据价值探索。”

Alluxio 业务拓展副总裁孙玮表示

“此次,Alluxio与阿里云云原生数据仓库  AnalyticDB 产品的深度集成,将帮助更多业务上云的企业,能够更加快速、便捷地访问数据,获取可用于决策的分析结果,同时,还能获得更可靠的SLA和更低的数据成本,我们很高兴能够与阿里云达成技术合作,共同推动企业在数据计算与分析领域的效率提升。”

携手展望

在数据上云的大背景下,随着网络和存储硬件能力的提升,存储计算分离逐渐成为了大数据处理的重要趋势。阿里云将与 Alluxio 携手为客户构建高效的大数据技术平台以及离在线一体化的数据分析服务,同时实现降本增效。未来阿里云将携手更多生态伙伴,助力企业更高效的挖掘商机。

相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
机器学习/深度学习 弹性计算 编解码
Serverless 工作流适用场景及最佳实践
本文我们将围绕工作流话题,介绍: 1. 什么是工作流,适用哪些场景? 2. 阿里云的全托管工作流服务:Serverless 工作流 3. Serverless 工作流适用场景 4. Serverless 工作流编排函数计算的最佳实践
3937 0
Serverless 工作流适用场景及最佳实践
|
8月前
|
存储 SQL Apache
Flink + Fluss 实战: Delta Join 原理解析与操作指南
Flink Delta Join 通过复用源表数据替代本地状态,解决双流 Join 状态膨胀问题。结合 Fluss 流存储,实现高效双向 Lookup,显著降低资源消耗与 Checkpoint 时间,提升作业稳定性与恢复速度,已在阿里大规模落地。
622 25
Flink + Fluss 实战: Delta Join 原理解析与操作指南
|
8月前
|
SQL 人工智能 大数据
周卫林|大数据通往大模型的钥匙:NoETL to Trusted AI
此时此刻,站在 Data 和 AI 的十字路口,我不禁扪心自问:是创造还是涅灭,大数据如何通往大模型,数据资产如何成为 AI 资产?是廿年戎马终归碌碌无为,还是四载厚积一朝破茧成蝶——让 Aloudata 成为大数据通往大模型的钥匙,开启数据智能变革的黄金十年。
|
关系型数据库 MySQL
mysql中有大量sleep进程的原因与解决办法
mysql中有大量sleep进程的原因与解决办法
1468 0
|
10月前
|
存储 JSON 前端开发
《SaaS应用核心痛点攻坚:租户级动态配置管理的技术实践与落地》
本文针对SaaS应用租户自定义配置混乱痛点,分享动态配置管理实践:摒弃早期硬编码+通用字段方案,以元数据驱动设计配置模型,含预设行业模板与字段关联逻辑简化配置;构建“租户-角色-配置权限”三维模型,细化权限维度并记录操作日志;采用“基础表+动态分表”存储方案,按业务模块与租户哈希分表提升查询性能;开发前端动态渲染框架,依元数据自动生成组件;引入配置版本管理与灰度生效机制,通过版本兼容与回滚保障更新稳定,为租户个性化配置提供系统化解决方案。
449 8
|
Web App开发 网络安全
requests库的使用—SSL证书验证
requests库的使用—SSL证书验证
774 0
|
API C#
异步轮询 Web API 的实现与 C# 示例
异步轮询 Web API 的实现与 C# 示例
593 1
|
域名解析 分布式计算 资源调度
在文件存储 HDFS 上使用 Apache Flink
本文主要为大家介绍在文件存储HDFS上搭建及使用Apache Flink的方法。
2335 0
在文件存储 HDFS 上使用 Apache Flink
|
人工智能 图形学 Python
分享40个Python游戏源代码总有一个是你想要的
分享40个Python游戏源代码总有一个是你想要的
3165 0