Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

本文涉及的产品
函数计算FC,每月15万CU 3个月
简介: 阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获2024信通院Serveless实践标杆案例。本文介绍其应用场景、平台特性以及领域实践。

【阅读原文】戳:Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

2024年7月24日,可信云大会·云原生与大模型云服务分论坛在京成功召开。会上正式发布了《Serverless应用实践案例集》。本案例集汇编精选来自证券、电信、银行、物流、汽车等多个行业Serverless应用实践案例,重点从业务痛点、实施方案、建设成效、成果创新等方面对案例进行详细介绍,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。其中,阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获标杆案例

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

 

 

 

应用场景

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台是阿里云推出的专为离线任务运行的调度平台,应用场景广泛,包括定时任务、仿真模拟、数据萃取、模型训练、CI/CD等。

 

点击快速入门Serverless Argo Workflows:

 

https://www.alibabacloud.com/help/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/workflow-cluster-quickstart

 

 

 

 

平台特性

 

 

Serverless Argo Workflows大规模离线计算工作流平台相比传统离线任务平台,架构简洁清晰,性能成倍提升,成本明显降低。其主要得益于以下几个方面的设计与优化:

 

 

1)Kubernetes、容器化

 

基于Kubernetes集群构建容器化离线计算平台,结合CNCF毕业项目Argo Workflows实现复杂的离线任务编排。

 

2)全托管、免运维

 

全托管Kubernetes控制面和开源Argo Workflows,极大的减少用户运维负担,用户无需关注系统的运维和升级,可以专注于离线计算工作流的设计和优化。

 

3)性能调优,大规模

 

针对离线任务特点,进行Kubernetes控制面进行针对调优,例如:控制面自动伸缩,任务并行调度和精确限流,保障管控面针对离线任务的高性能和稳定性。

 

4)Serverless 极致弹性

 

基于阿里云弹性容器实例ECI运行工作流任务,开箱即用,运行完成即回收资源,可在多个区域和可用区调度资源,支持大规模工作流的运行,无需排队等待。

 

5)无缝迁移

 

全托管开源Argo Workflows,无缝兼容开源标准,无厂商绑定风险,无需修改现有 Argo 工作流,即可完成工作流的平滑迁移。

 

 

 

领域实践

 

 

阿里云容器服务Serverless Argo Workflows为用户提供了强大的工作流管理能力,特别是在需要处理大规模离线计算的任务中表现出色。在自动驾驶、科学计算、金融模拟、数字媒体等领域,其应用价值尤为显著,得到广泛实践。

 

 

 

 

 

未来展望

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台作为Serverless实践标杆案例,引领了大规模离线任务处理新方法。未来会继续在Serverless、弹性、大规模等方向深耕,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。欢迎使用钉钉扫描二维码或搜索群号加入我们。(钉钉群号:35688562

 

参考:

 

中国信通院 Serverless 应用实践案例集:

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

Serverless Argo Workflows:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/overview-12

 

创建工作流:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/create-a-workflow-cluster

 

Serverless Argo Workflows 最佳实践:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/use-cases/distributed-workflow-argo-cluster-best-practices/


我们是阿里巴巴云计算和大数据技术幕后的核心技术输出者。

欢迎关注 “阿里云基础设施”同名微信微博知乎

获取关于我们的更多信息~

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
1月前
|
运维 监控 Serverless
揭秘云计算中的Serverless架构:优势、挑战与实践
揭秘云计算中的Serverless架构:优势、挑战与实践
|
2天前
|
人工智能 Serverless API
尽享红利,Serverless构建企业AI应用方案与实践
本次课程由阿里云云原生架构师计缘分享,主题为“尽享红利,Serverless构建企业AI应用方案与实践”。课程分为四个部分:1) Serverless技术价值,介绍其发展趋势及优势;2) Serverless函数计算与AI的结合,探讨两者融合的应用场景;3) Serverless函数计算AIGC应用方案,展示具体的技术实现和客户案例;4) 业务初期如何降低使用门槛,提供新用户权益和免费资源。通过这些内容,帮助企业和开发者快速构建高效、低成本的AI应用。
32 12
|
11天前
|
Serverless 开发工具 开发者
活动实践 | 西游再现,函数计算一键部署 Flux 超写实文生图模型部署
这些图片展示了阿里巴巴云开发者生态的多个方面,包括开发工具、技术文档、社区交流、培训认证等内容,旨在为开发者提供全方位的支持和服务。
|
11天前
|
存储 弹性计算 关系型数据库
活动实践 | 告别资源瓶颈,函数计算驱动多媒体文件处理测评
本方案介绍了一种高效处理文件的方法,适用于企业办公和社交媒体应用。通过阿里云的函数计算、对象存储OSS和轻量消息队列,实现文件的异步处理,如格式转换和水印添加,有效减轻了核心应用的负担,提高了业务稳定性和资源利用率。方案包括云服务器ECS、云数据库RDS、OSS存储等组件,支持快速部署和资源清理。
|
22天前
|
监控 Serverless 云计算
探索Serverless架构:开发实践与优化策略
本文深入探讨了Serverless架构的核心概念、开发实践及优化策略。Serverless让开发者无需管理服务器即可运行代码,具有成本效益、高可扩展性和提升开发效率等优势。文章还详细介绍了函数设计、安全性、监控及性能和成本优化的最佳实践。
|
27天前
|
弹性计算 算法 搜索推荐
活动实践 | 通过函数计算部署ComfyUI以实现一个AIGC图像生成系统
ComfyUI是基于节点工作流稳定扩散算法的新一代WebUI,支持高质量图像生成。用户可通过阿里云函数计算快速部署ComfyUI应用模板,实现个性化定制与高效服务。首次生成图像因冷启动需稍长时间,之后将显著加速。此外,ComfyUI允许自定义模型和插件,满足多样化创作需求。
|
27天前
|
弹性计算 自然语言处理 搜索推荐
活动实践 | 基于函数计算部署GPT-Sovits模型实现语音生成
通过阿里云函数计算部署GPT-Sovits模型,可快速实现个性化声音的文本转语音服务。仅需少量声音样本,即可生成高度仿真的语音。用户无需关注服务器维护与环境配置,享受按量付费及弹性伸缩的优势,轻松部署并体验高质量的语音合成服务。
|
3月前
|
人工智能 自然语言处理 Serverless
阿里云函数计算 x NVIDIA 加速企业 AI 应用落地
阿里云函数计算与 NVIDIA TensorRT/TensorRT-LLM 展开合作,通过结合阿里云的无缝计算体验和 NVIDIA 的高性能推理库,开发者能够以更低的成本、更高的效率完成复杂的 AI 任务,加速技术落地和应用创新。
175 13
|
4月前
|
Serverless API 异构计算
函数计算产品使用问题之修改SD模版应用的运行环境
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
4月前
|
运维 Serverless 网络安全
函数计算产品使用问题之通过仓库导入应用时无法配置域名外网访问,该如何排查
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
下一篇
DataWorks