带你读《云存储应用白皮书》之33:6. 高性能计算存储在渲染行业的应用

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
文件存储 NAS,50GB 3个月
简介: 带你读《云存储应用白皮书》之33:6. 高性能计算存储在渲染行业的应用

6. 高性能计算存储在渲染行业的应用

 

1需求背景

 

伴随着4KVRAI和仿真技术的高速发展,渲染、游戏等行业越来越依赖高性能计算平台来替代传统的IT分析系统,为业务进入快车道发展争取更多的时间窗口,而背靠在计算平台之后的存储系统是不可忽视的重要一环。

 

渲染属于典型的数字内容创作高性能计算应用,渲染的关键之处在于实现集群计算,让海量节点来分摊成百上千万的渲染小时。。随着文娱产业及工业的发展以及显示器硬件的高清化升级,用户和CG制作者对于图形质量如清晰度和画面细节的要求越来越高,行业对于渲染服务的需求规模和质量要求迅速扩大和提高。

 

2解决方案

 

在渲染前,需要为大规模数据准备足够容量的存储设备;在渲染过程中,还需要高性能来完成大量的数据处理工作,以生成最终输出。所以,渲染业务对吞吐、IOPS和元数据OPS等要求都非常高,使用传统的存储解决方案将难以满足客户需求。为此可使用基于阿里云CPFS(并行文件系统)设计的计算存储解决方案。

 

目前CPFS支持公共云上即开即用,也支持通过阿里云定制的CPFS一体化软硬件服务用户的线下数据机房。由于渲染涉及的数据资产需要线下存储,因此本方案实践是通过线下实施部署的CPFS一体机。整体解决方案架构如下:

 


image.png

 

方案优势:

 

∙       引入协议转换服务,解决多终端和多协议混用。


∙       通过分布式的协议节点和存储节点,实现节点存储容量和性能实现弹性扩容。


∙       在计算节点、CPFS客户端、协议节点和存储节点划分一定容量的内存缓存,加速计算过程的数据读写。


∙       采用SSD+HDD混合部署的模式,解决了冷热数据存储成本问题。


∙       存储单节点吞吐量达到2.6GB/s,并随节点数增加线性增长,最大可扩展到近千节点。


相关文章
|
存储 弹性计算 运维
带你读《生命科学行业云上解决方案及最佳实践》——阿里云 E-HPC 生命科学行业整体解决方案(上)
带你读《生命科学行业云上解决方案及最佳实践》——阿里云 E-HPC 生命科学行业整体解决方案(上)
353 0
|
存储 弹性计算 运维
带你读《生命科学行业云上解决方案及最佳实践》——阿里云 E-HPC 生命科学行业整体解决方案(下)
带你读《生命科学行业云上解决方案及最佳实践》——阿里云 E-HPC 生命科学行业整体解决方案(下)
284 0
|
弹性计算 缓存 运维
带你读《生命科学行业云上解决方案及最佳实践》——五大解决方案(上)
带你读《生命科学行业云上解决方案及最佳实践》——五大解决方案(上)
226 0
|
弹性计算 并行计算 数据挖掘
带你读《生命科学行业云上解决方案及最佳实践》——五大解决方案(下)
带你读《生命科学行业云上解决方案及最佳实践》——五大解决方案(下)
238 0
|
机器学习/深度学习 人工智能 并行计算
带你读《生命科学行业云上解决方案及最佳实践》——GHDDI,阿里云高性能计算助力 药物研发实现高通量分子筛选
带你读《生命科学行业云上解决方案及最佳实践》——GHDDI,阿里云高性能计算助力 药物研发实现高通量分子筛选
205 0
|
存储
《HPC高性能计算数据存储解决方案蓝皮书》电子版地址
HPC高性能计算数据存储解决方案蓝皮书
120 0
《HPC高性能计算数据存储解决方案蓝皮书》电子版地址
|
Cloud Native
深圳见!云原生加速应用构建专场:来看云原生 FinOps、SRE、高性能计算场景最佳实践
深圳见!云原生加速应用构建专场:来看云原生 FinOps、SRE、高性能计算场景最佳实践
深圳见!云原生加速应用构建专场:来看云原生 FinOps、SRE、高性能计算场景最佳实践
|
存储 机器学习/深度学习 人工智能
赋能尖端科技 推进智能布局 |《HPC高性能计算数据存储解决方案蓝皮书》正式发布
高性能计算领跑前沿技术进步,保持活力的秘密是身后亿万级数据被有条不紊管理和分析,从而实现不同行业的不同企业可以针对庞大数据集,构建自己的核心竞争优势的能力。《HPC高性能计算数据存储解决方案蓝皮书》(以下简称“蓝皮书”)的发布,将帮助客户解决高性能计算应用场景下的数据存储与管理难题。
1650 0
赋能尖端科技 推进智能布局 |《HPC高性能计算数据存储解决方案蓝皮书》正式发布