阿里云E-HPC赋能制造业仿真云弹性

简介: 从公测开始说起 去年9月份E-HPC开始公测,某仿真客户便开始申请使用弹性高性能服务。该客户因为业务关系已开始或多或少使用云计算产品,另一方面传统制造业发展问题也促使客户想尝试做出一些改变。 经过同客户的初步交流,客户的主要痛点集中在以下方面:客户从事仿真行业,通过服务传统的制造业获得营收,因此客户的客户集中在汽车,航天,船舶等。

从公测开始说起

去年9月份E-HPC开始公测,某仿真客户便开始申请使用弹性高性能服务。该客户因为业务关系已开始或多或少使用云计算产品,另一方面传统制造业发展问题也促使客户想尝试做出一些改变。

经过同客户的初步交流,客户的主要痛点集中在以下方面:客户从事仿真行业,通过服务传统的制造业获得营收,因此客户的客户集中在汽车,航天,船舶等。一方面该仿真企业的客户在不同阶段对算力的需求也不尽相同,有时也突然遇到比较大的仿真需求的客户,自己机房的小规模的机器经常满足不了生产需要,总的来说一年四季客户对计算力的需求总是会有各种各样的波动。

 4d355821ab5487af62092fa5370413be7baa68f3

最开始的弹性

E-HPC刚上线时为在云上资源所建立的集群提供了计算机群扩容和缩容的功能,这意味者在云上New出来的计算节点一方面要能部署同其他计算节点一样高性能软件栈,另外一方面要求节点要有同一套POSIX账号体系,以便集群作业调度器能够将用户提交的作业调度到该节点上运行。客户刚开始便很快完成了基于ECS的集群创建,刚开始运行需要几十个计算核心的算例,通过E-HPC的扩容完成计算机群节点的增加,同时可以马上在该集群运行更多核心的结构和流体求解器计算作业。

能自动伸缩的弹性

       客户为制造企业提供仿真服务,有些算例客户在运行前可以预估大概需要多少计算核心计算多少时间,但有些复杂算例,客户也无法确定资源需求量。客户希望E-HPC产品提供的计算机群能够贴着客户从仿真系统提交的作业数量和实际的真正运行作业的计算核心数走,即客户想尽可能用好每一个CPU周期,因此希望E-HPC能帮助客户自动完成自动增加计算节点和自动减少集群的计算节点。所以,AutoScale功能便上线了。AutoScale可以根据整个高性能集群的负载和策略动态调整计算机群扩容和缩容。

7def78654258bfaa25b3eb9452ddc6b7a703db8c

同云桌面/GPU服务器的结合

一般在仿真工作流里面,完成大量的仿真计算后会进入到渲染阶段,所以一般会经过GPU服务器集群的Pipeline,最后通过云桌面展示给客户的客户。于是E-HPC开始支持自定义镜像,方便客户从带有特点渲染软件的镜像启动GPU实例完成仿真后处理工作,并且E-HPC开始推出支持竞价实例的扩容方式以便客户能够使用较低的成本完成一些无状态的训练任务。

c08a1fc9eddc3f64b39430ecfec27fac1d281daf

超级计算集群

传统的高能计算,为了计算的极致,从每年的Top500来看,在计算存储网络方面都有很明显的特点。首先,在计算方面高能计算的集群的计算节点倾向于选择高主频类型的处理器,频率基本都在3GHz~4GH;其次在存储方面 基本是基于传统企业级盘阵,存储系统的可靠性放在盘阵自身的容错能力上,很少使用多副本的方案;在网络方面,传统应用多使用基于同步通信的并行算法,因此为了能达到较大的加速比一般使用低延迟的RDMA网络甚至是专门定制的通信网络。

年初云上超级计算集群(SCC)开始公测,提供能运行超算应用的计算存储和网络基础设施,SCC能够给流体仿真之类的有限元分析软件提供近乎线性的加速比。结合E-HPC提供的弹性,客户很快便完成了POC测试。

a83e9fbb8da1c8cdd2a1463c76a4f4552f1359f6

我们可以看到对于同样几亿单元的有限元分析,使用SCC无论是单节点的计算能力还是多节点加速比都有显著提升,因此客户给反馈了如下的测试感受:

“1.计算性能强劲:无论是单节点的计算能力,还是多节点分布式计算能力都有显著提升,在测试项目计算规模之内,都可以获得非常不错的加速效率”

“2.集群互联IO性能:RDMA高速互联可以满足一定范围内的大规模的机械,流体等仿真应用计算要求,效果显著” ,要性能有性能,要弹性有弹性之后,客户便更有信心将仿真生产系统往云上迁移。

仿真应用迁云

该仿真客户经过多年的仿真服务实践,开发了一款仿真系统,该系统集成了制造仿真行业常用的商业软件,基本覆盖碰撞仿真,流体动力学,机械结构,电磁模拟等。 

该仿真系统提供了统一的Portal给不同的制造企业以一致的体验完成仿真工作流,早期的系统结构基本如下图所示:从中我们可以看出早期的结构基本立足于传统超算,融合了CAE并行计算、计算资源调度、软硬件资源管理、远程图形桌面以及CAE专业应用等技术,由此面向仿真用户提供仿真计算服务。客户需要很重的成本来拥有这些基础设置作为生产资料来服务客户的客户。然而,经过交流,客户的心声是做仿真他们是专业的,但是经营IT基础设施只是为了维持他们的仿真生产系统而进行的活动;他们想专注于仿真服务,而将IT基础设施迁往云上,于是客户便有了仿真系统迁云的想法。

69af39f1660542adb69e47ac2ade322816533632

客户想通过将仿真系统迁云,达到以下效果:

1.用户不需要购买任何物理IT硬件资源,通过Web即可开展仿真分析工作。

2.统一管理和调配专业软件软件管理,充分利用昂贵的CAE软件资源。  

3.通过云计算弹性充分利用云上资源进行仿真。

经过逐渐的验证,客户在阿里云上完成了将仿真流程收敛到下面的结构:

92c48dc567a69bcd0f4d88716638ff99d53ddf0a

从上面的分析,我们可以发现客户能够更加专注于仿真工作流本身,而将对IT基础设施的使用变成了阿里云上一条一条的OpenAPI;需要集群时通过一条OpenAPI New出一个超算集群,算力不够时通过一条Open API New出新的计算机群,作业空闲时通过一条Open API释放计算机群,不想手动操作时通过一条Open API 自动伸缩集群。客户不用再考虑自建机房,备货,扩建,设备运维...... 。

总结 

随着工业仿真技术的不断发展和成熟以及工业产品的自身的复杂程度越来越高,目前现在多数工业仿真对象都是在各种复杂物理环境条件情况下进行的,这种情况决定了完成工业级的仿真工作需要大量的计算和高性能的存储资源,以及配套的可以执行快创建和访问仿真模型和数据,并能够实现较高程度的自动化仿真流程。工业上的仿真技术在产品研发中所扮演的角色在流程上越来越靠前,不再是产品设计完成后的后端验证。与此同时,工业仿真技术在产品生命周期的下游也发挥着越来越重要的作用,比如分析来自工业物联网中机器的实时操作数据。因此,工业仿真所需计算资源、人才培养、环境建设的难度都在增加。但对于企业来讲,搭建一个环境并培养专职的仿真工程师并不容易,仅仅是购买软硬件的需求调研就可能花费数月时间,之后还得投入大量的时间和精力进行专业领域仿真培训和应用部署。 

同其他的企业级IT应用一样,云计算技术正在给仿真应用带来巨大的改变。通过仿真云平台能够对产品进行设计、改进、创新进行模型的快速验证和方案的对比。对于传统制造企业来说,使用云计算技术的价值归根结底是不用购买和管理物理计算集群,从而可以改变传统的仿真应用流程,更加专注于仿真应用本身。基于云计算技术,企业将可以用到更加灵活的软件使用价格,并可以随时随地进行建模解决复杂的仿真应用问题。借助同时模拟多个不同设计方案的能力,基于云计算技术的仿真可以支持传统制造业更轻松地进行产品设计和工程仿真。通过在阿里云上仿真,可以很快获取弹性资源,能够在很短的时间就可以进行完整的仿真生产流程。不管是加快产品创新,还是满足制造业不断增长的仿真需求或是,加强全球合作提高IT投资回报率,都会收到立竿见影的效果。

——阿里云高性能计算团队出品

关于作者

本文作者沐晖,阿里云虚拟化平台技术专家,擅长研究领域弹性高性能计算,曾多次获得多个专利证书和奖项。

目录
相关文章
|
物联网 Android开发
Android Ble蓝牙App(七)扫描过滤
Android Ble蓝牙App(七)扫描过滤
767 0
|
机器学习/深度学习 人工智能 数据挖掘
GPU加速:解锁高性能计算的未来
【10月更文挑战第20天】GPU加速:解锁高性能计算的未来
1367 1
|
JavaScript
新建一个vue2项目
新建一个vue2项目
1094 0
|
7月前
|
人工智能 程序员 调度
智能体来了(西南总部):AI调度官与 AI Agent 指挥官的 Prompt 与 Workflow 实战
在大模型落地产业的浪潮中,成都AI智能体产业基地正崛起为西南AI枢纽。AI Agent指挥官作为新职业角色,通过Prompt设计、Workflow编排与多智能体协同,推动AI从“能聊天”到“会办事”的跃迁,成为企业智能化转型的核心调度者。
413 4
|
5月前
|
人工智能 安全 API
OpenClaw安全搭建必看!阿里云/本地部署+百炼API配置+skill-vetter安全审计实战/恶意Skill防御教程
在AI智能体全面普及的2026年,OpenClaw(Clawdbot)凭借强大的执行能力成为最受欢迎的开源智能体框架,它能调用系统命令、读写文件、控制浏览器、联网访问、对接各类平台,真正实现“自然语言驱动自动化”。但能力越大风险越高,近年来大量用户遭遇文件被删除、密钥泄露、系统崩溃、数据外传等安全事故,**根源并非OpenClaw框架本身,而是安装了不受控的恶意Skill,并且开放了过高权限**。
1527 3
|
XML Java 数据库连接
mybatis-plus里面的Page
mybatis-plus里面的Page
1561 0
|
机器学习/深度学习 数据采集 算法
【Python机器学习专栏】数据标准化与归一化技术
【4月更文挑战第30天】在机器学习中,数据预处理的两大关键步骤是标准化和归一化,旨在调整数据范围以优化算法性能。标准化将数据缩放到特定区间,如[-1, 1]或[0, 1],适合基于距离的算法,如KNN、SVM。归一化则将数据线性变换到[0, 1],保持相对关系。Python中可使用`sklearn.preprocessing`的`MinMaxScaler`和`StandardScaler`实现这两种操作。选择哪种方法取决于数据分布和算法需求。预处理能提升模型理解和性能,增强预测准确性和可靠性。
807 0
|
人工智能 文字识别 PyTorch
数学公式识别(Mathpix + pix2tex)
数学公式识别(Mathpix + pix2tex)
1578 0
|
监控 图形学
SolidWorks是目前结构工程领域最流行和广泛应用的3D CAD软件——下载安装教程
SolidWorks是一款流行且广泛应用于机械设计和工程学科的3D CAD软件,它可以帮助工程师实现3D建模、分析、绘制和制造各种机械部件和设备。该软件的建模工具与用户友好的操作界面使得工程师能够轻松创建各种图形、零部件和装配体。此外,SolidWorks还包括多种实用工具和模块,如模拟、生产和管理模块等,可以满足设计师在不同阶段的需求。其中模拟模块为工程师提供了可靠的设计评估和仿真工具,生产模块则可以用于规划和监控制造过程,而管理模块则是为用户提供了方便的协作和版本管理工具。

热门文章

最新文章

相关产品

  • 弹性高性能计算