Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

本文涉及的产品
容器服务 Serverless 版 ACK Serverless,317元额度 多规格
函数计算FC,每月15万CU 3个月
容器服务 Serverless 版 ACK Serverless,952元额度 多规格
简介: 阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获2024信通院Serveless实践标杆案例。本文介绍其应用场景、平台特性以及领域实践。

【阅读原文】戳:Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

2024年7月24日,可信云大会·云原生与大模型云服务分论坛在京成功召开。会上正式发布了《Serverless应用实践案例集》。本案例集汇编精选来自证券、电信、银行、物流、汽车等多个行业Serverless应用实践案例,重点从业务痛点、实施方案、建设成效、成果创新等方面对案例进行详细介绍,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。其中,阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获标杆案例

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

 

 

 

应用场景

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台是阿里云推出的专为离线任务运行的调度平台,应用场景广泛,包括定时任务、仿真模拟、数据萃取、模型训练、CI/CD等。

 

点击快速入门Serverless Argo Workflows:

 

https://www.alibabacloud.com/help/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/workflow-cluster-quickstart

 

 

 

 

平台特性

 

 

Serverless Argo Workflows大规模离线计算工作流平台相比传统离线任务平台,架构简洁清晰,性能成倍提升,成本明显降低。其主要得益于以下几个方面的设计与优化:

 

 

1)Kubernetes、容器化

 

基于Kubernetes集群构建容器化离线计算平台,结合CNCF毕业项目Argo Workflows实现复杂的离线任务编排。

 

2)全托管、免运维

 

全托管Kubernetes控制面和开源Argo Workflows,极大的减少用户运维负担,用户无需关注系统的运维和升级,可以专注于离线计算工作流的设计和优化。

 

3)性能调优,大规模

 

针对离线任务特点,进行Kubernetes控制面进行针对调优,例如:控制面自动伸缩,任务并行调度和精确限流,保障管控面针对离线任务的高性能和稳定性。

 

4)Serverless 极致弹性

 

基于阿里云弹性容器实例ECI运行工作流任务,开箱即用,运行完成即回收资源,可在多个区域和可用区调度资源,支持大规模工作流的运行,无需排队等待。

 

5)无缝迁移

 

全托管开源Argo Workflows,无缝兼容开源标准,无厂商绑定风险,无需修改现有 Argo 工作流,即可完成工作流的平滑迁移。

 

 

 

领域实践

 

 

阿里云容器服务Serverless Argo Workflows为用户提供了强大的工作流管理能力,特别是在需要处理大规模离线计算的任务中表现出色。在自动驾驶、科学计算、金融模拟、数字媒体等领域,其应用价值尤为显著,得到广泛实践。

 

 

 

 

 

未来展望

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台作为Serverless实践标杆案例,引领了大规模离线任务处理新方法。未来会继续在Serverless、弹性、大规模等方向深耕,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。欢迎使用钉钉扫描二维码或搜索群号加入我们。(钉钉群号:35688562

 

参考:

 

中国信通院 Serverless 应用实践案例集:

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

Serverless Argo Workflows:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/overview-12

 

创建工作流:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/create-a-workflow-cluster

 

Serverless Argo Workflows 最佳实践:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/use-cases/distributed-workflow-argo-cluster-best-practices/


我们是阿里巴巴云计算和大数据技术幕后的核心技术输出者。

欢迎关注 “阿里云基础设施”同名微信微博知乎

获取关于我们的更多信息~

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
1月前
|
运维 Kubernetes 前端开发
拥抱Knative, 合思加速Serverless化演进实践
合思信息基于阿里云容器服务Knative, 实现Serverless化演进的最佳实践。
拥抱Knative, 合思加速Serverless化演进实践
|
9天前
|
Kubernetes Cloud Native Serverless
批处理系统:Batch批量计算与云原生Serverless Argo Workflows
本文对比了Batch批量计算与Serverless Argo Workflows在容器化批处理任务中的应用,分析了两者在任务定义、依赖关系、规模并发、高级编排、可移植性等方面的异同,帮助技术决策者根据自身需求选择合适的平台。
|
2月前
|
前端开发 大数据 数据库
🔥大数据洪流下的决战:JSF 表格组件如何做到毫秒级响应?揭秘背后的性能魔法!💪
【8月更文挑战第31天】在 Web 应用中,表格组件常用于展示和操作数据,但在大数据量下性能会成瓶颈。本文介绍在 JavaServer Faces(JSF)中优化表格组件的方法,包括数据处理、分页及懒加载等技术。通过后端分页或懒加载按需加载数据,减少不必要的数据加载和优化数据库查询,并利用缓存机制减少数据库访问次数,从而提高表格组件的响应速度和整体性能。掌握这些最佳实践对开发高性能 JSF 应用至关重要。
58 0
|
2月前
|
运维 Serverless PyTorch
函数计算产品使用问题之ComfyUI除了通过WebUI页面进行,还有什么其他方法部署
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
2月前
|
NoSQL Serverless 数据库连接
Serverless 架构实现弹幕场景问题之initializer方法在执行过程中遇到错误如何解决
Serverless 架构实现弹幕场景问题之initializer方法在执行过程中遇到错误如何解决
33 0
|
2月前
|
存储 Serverless API
Serverless 架构实现弹幕场景问题之在initializer方法中初始化数据库实例如何解决
Serverless 架构实现弹幕场景问题之在initializer方法中初始化数据库实例如何解决
24 0
|
2月前
|
分布式计算 Serverless 数据处理
EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
Apache Airflow 是一个强大的工作流程自动化和调度工具,它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark 为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过 Apache Airflow 的 Livy Operator 实现自动化地向 EMR Serverless Spark 提交任务,以实现任务调度和执行的自动化,帮助您更有效地管理数据处理任务。
181 0
|
1月前
|
人工智能 自然语言处理 Serverless
阿里云函数计算 x NVIDIA 加速企业 AI 应用落地
阿里云函数计算与 NVIDIA TensorRT/TensorRT-LLM 展开合作,通过结合阿里云的无缝计算体验和 NVIDIA 的高性能推理库,开发者能够以更低的成本、更高的效率完成复杂的 AI 任务,加速技术落地和应用创新。
120 14
|
2月前
|
Serverless API 异构计算
函数计算产品使用问题之修改SD模版应用的运行环境
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
2月前
|
运维 Serverless 网络安全
函数计算产品使用问题之通过仓库导入应用时无法配置域名外网访问,该如何排查
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。

热门文章

最新文章