开发者社区> 阿里云文档> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

赋能尖端科技 推进智能布局 |《HPC高性能计算数据存储解决方案蓝皮书》正式发布

简介: 高性能计算领跑前沿技术进步,保持活力的秘密是身后亿万级数据被有条不紊管理和分析,从而实现不同行业的不同企业可以针对庞大数据集,构建自己的核心竞争优势的能力。《HPC高性能计算数据存储解决方案蓝皮书》(以下简称“蓝皮书”)的发布,将帮助客户解决高性能计算应用场景下的数据存储与管理难题。
+关注继续查看

test

前言

提到尖端科技,不免联想到人工智能、自动驾驶、量子计算机等,这些借电影大片走进大众的视野,如今却逐步实现新兴领域,科技飞速发展造就了如梦似幻“破次元壁”的相遇,促成每一次不真实的相遇的是技术领域的革新,而支撑大数据、人工智能以及深度学习等场景进行融合和演进的云产品之一,便是高性能计算(High Performance Computing,HPC)。

高性能计算为产业加速

新一代信息技术为我国经济社会的发展提供全新的方向,科技革命和产业变革也随着信息技术不断突破迸发出生命力,信息技术突破和应用将在很大程度上象征各国的综合国力。而以E级计算、量子计算、智能计算、边缘计算等为代表的高性能计算技术,是实现技术突破和产业加速的重要方式。
从影视渲染、在线直播,到自动驾驶、工业仿真、石油/油气勘探,再延伸至基因检测、生命科学、天文,各领域的业务系统越来越需要大数据量、高性能的决策分析。高性能计算也从过去的科研领域,逐渐向新兴的大数据、人工智能以及深度学习等场景进行融合和演进。无论是推动行业转型升级抢占未来技术高地,还是提升科研能力服务国家安全,高性能计算扮演着越来越重要的角色,逐步引领科技进步和突破。

高性能计算下的存储升级

蓝皮书中提到一组数据:根据Intersect360的相关报告数据显示,到 2021年,高性能计算的市场总额预计将增长到 439亿美元,复合年增长率CAGR为4.3%。其中,服务器是最大的组成部分,存储和软件次之,其中服务器、存储和网络占所有预算的 64%。

test
高性能计算领跑前沿技术进步,保持活力的秘密,是亿万级数据被有条不紊管理和分析,从而实现不同行业的不同企业可以针对庞大数据集,构建自己的核心竞争优势的能力。
《HPC高性能计算数据存储解决方案蓝皮书》(以下简称“蓝皮书”)的发布,将帮助客户解决高性能计算应用场景下的数据存储与管理难题。

test
(蓝皮书下载路径,见文末)

蓝皮书要点概览

行业趋势 面面俱到

越来越多的组织和企业依赖高性能计算平台来替代传统的 IT 分析系统,通过借助强大的算力为业务决策和产品竞争力提供更多的机会,与此同时,一些数据管理和存储的问题也逐渐凸显。

技术痛点 层层剖析

低质量数据匹配难:在高性能计算运行的过程中需要消耗大量的数据,在一些人工智能的训练场景中会使用深层神经网络来关注关键的信息,并需要从复杂的关系中完成正确的匹配,当数据质量度低的时候,就会增加匹配的难度。
云上对接难度高:现阶段支持的协议较单一,无法与云上对接,一旦业务系统使用了更丰富的协议接口,便要求业务侧做改造升级,同时也无法充分利用云端的资源。
运维复杂成本高:需要管理多套不同品牌、不同技术栈的文件存储,没有统一的性能监控界面,也无法横向扩展,给日常维护管理带来不便,同时,数据需要在多套NAS存
储之间互相拷贝,管理开销大。受制于存储性能和计算集群节点数量的限制,需要建设多套文件存储,长期建设成本高。

深度优化 不断突破

结合业务痛点进行技术深度优化改良,产品迭代与选择更匹配高性能计算场景的需求。
【CPFS一体机】
观看视频,3分钟了解CPFS一体机产品全貌
CPFS一体机是阿里云针对高性能计算场景输出的软硬件一体机产品,单集群最大可扩展至 732个存储节点,为高性能计算场景的企业级客户提供前所未有的高性能、高可扩展性、低延时的非结构化分布式存储服务。
【文件存储CPFS】
文件存储CPFS的最全资料都在这里啦!
立即创建资源包套餐,低至¥0.75元 / 月GB
文件存储 CPFS (Cloud Parallel File Storage)是阿里云完全托管、可扩展的并行文件存储系统,针对高性能计算场景的性能要求进行了深度优化,提供对数据毫秒级的访问和高聚合 IO、高 IOPS的数据读写请求,可以用于 AI深度训练、自动驾驶、基因计算、EDA仿真、石油勘探,气象分析,机器学习,大数据分析以及影视渲染等业务场景中。
【对象存储OSS】
多款存储折扣包,随心配置
OSS作为阿里巴巴全集团数据存储的核心基础设施,多年支撑双十一业务高峰,历经高可用与高可靠的严苛考验。海量、安全、低成本、高可靠的云存储服务,提供99.9999999999%的数据可靠性。使用RESTful API 可以在互联网任何位置存储和访问,容量和处理能力弹性扩展,多种存储类型供选择全面优化存储成本。

客户收益 立竿见影

科研机构:实现了操作复杂度降低,数据快速分析
通过使用科研项目所需的经济、弹性、高效、安全的计算、存储和数据库等功能模块,科研人员可以处理更为复杂的工作负载。借助阿里云 HPC解决方案,科研人员可以对海量数据进行快速分析,并与世界各地的协作者共享其科研成果。
渲染行业:实现存储成本降低、轻松业务访问
采用了 100G的超高速 IB 网络,引入 SMB协议机作为上游渲染业务集群和下游存储集群之间的桥梁,解决了海量 Windows终端挂载访问问题,存储系统通过的三级缓存机制,应对高并发的计算数据读写请求,通过热点数据缓存管理,实现高性能数据读写的软着陆,有效解决了传统 NAS存储直接使用后端存储去应对业务访问的难题。采用SSD+HDD混布的模式,降低计算冷热数据存储成本。

配套实践 助您决策

(1)EHPC工业仿真最佳实践
(2)EHPC药物筛选最佳实践

结语

近几年,作为科技创新的重要手段,高性能计算在各个领域都有不俗的表现,是当代科技竞争的战略制高点,集中体现一个国家的综合实力。有专家预测,高性能计算甚至有望在气候科学、可再生能源、基因组学以及天体物理学等领域“大显身手”。存储能力是成就高强劲生命力的养分,轻松扩容、秒级处理、降本增效为高性能计算技术的每一次进步提供了能量。为尖端科技赋能,由表及里,阿里云庞大架构的每个细小的分支,都在为此做出努力。

test

扫码进钉群 下载蓝皮书

关注“阿里云文档”云栖号,第一时间了解阿里云最全最新资料内容吧!

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
博睿数据与阿里云签订云原生核心合作伙伴计划,推动企业智能运维落地
5 月 13 日,博睿数据与阿里云宣布达成深度合作,重点发力企业智能运维领域。双方签订了云原生核心合作伙伴计划,通过博睿数据领先的拨测网络结合阿里云独特的 AIOps 能力,构建全球领先的 SaaS 产品云拨测,为企业提供领先、专业、全面的智能运维能力。
629 0
博睿数据与阿里云签订云原生核心合作伙伴计划,推动企业智能运维落地
博睿数据是阿里云云原生核心合作伙伴,未来,阿里云将与更多合作伙伴一起,发挥生态优势,为客户在云原生时代的资源弹性、系统稳定、应用敏捷、业务智能、安全可信创造更大的价值。
14535 0
阿里云数据库李飞飞:云计算推动数据库向云原生快速演进
过去的一年是阿里云数据库硕果累累的一年。
1663 0
阿里云数据库李飞飞:云计算推动数据库向云原生快速演进
12月30日,阿里云云原生数据库PolarDB举行年度发布。过去的一年是阿里云数据库硕果累累的一年。11月,Gartner公布阿里云进入全球数据库领导者象限,是国产数据库几十年积累的重大突破;12月,中国电子学会公布PolarDB获得科学技术奖一等奖。阿里云数据库深耕11年,至今已服务客户10万余。 阿里巴巴集团副总裁、阿里云智能数据库事业部总裁李飞飞表示,云计算正在推动数据库向云原生快速演进,阿里云数据库已全面布局云原生。
1020 0
阿里云资深数据专家闵万里:阿里云与中国人工智能的未来息息相关
面对采访,阿里云资深数据挖掘专家闵万里博士信心满满:“阿里云今天选择的,就是中国人工智能未来产生价值的必经之路,这也决定了阿里云与中国人工智能接下来的发展息息相关。”以下是本次访谈的详细内容:
4610 0
数据结构之2-3-4树
2-3-4树是一种阶为4的B树。它是一种自平衡的数据结构,可以在O(lgn)的时间内查找、插入和删除,这里的n是树中元素的数目。2-3-4树和红黑树是等价的,也就是每个红黑树都可以转化为一颗2-3-4树,每个选择操作也和2-3-4树中的分裂操作对应。       2-3-4树是这样一种数据结构,满足如下性质:       1) 每个节点每个节点有1、2或3个key,分别称为
1083 0
+关注
阿里云文档
阿里云文档团队
文章
问答
文章排行榜
最热
最新
相关电子书
更多
人工智能技术在旅游领域的实践
立即下载
云+SaaS:让人力资源变的更简单
立即下载
八年磨一剑 重新定义HBase
立即下载