Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

本文涉及的产品
函数计算FC,每月15万CU 3个月
简介: 阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获2024信通院Serveless实践标杆案例。本文介绍其应用场景、平台特性以及领域实践。

【阅读原文】戳:Serverless Argo Workflows荣获信通院标杆实践案例,引领大规模离线任务处理新方法

2024年7月24日,可信云大会·云原生与大模型云服务分论坛在京成功召开。会上正式发布了《Serverless应用实践案例集》。本案例集汇编精选来自证券、电信、银行、物流、汽车等多个行业Serverless应用实践案例,重点从业务痛点、实施方案、建设成效、成果创新等方面对案例进行详细介绍,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。其中,阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台荣获标杆案例

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

 

 

 

应用场景

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台是阿里云推出的专为离线任务运行的调度平台,应用场景广泛,包括定时任务、仿真模拟、数据萃取、模型训练、CI/CD等。

 

点击快速入门Serverless Argo Workflows:

 

https://www.alibabacloud.com/help/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/workflow-cluster-quickstart

 

 

 

 

平台特性

 

 

Serverless Argo Workflows大规模离线计算工作流平台相比传统离线任务平台,架构简洁清晰,性能成倍提升,成本明显降低。其主要得益于以下几个方面的设计与优化:

 

 

1)Kubernetes、容器化

 

基于Kubernetes集群构建容器化离线计算平台,结合CNCF毕业项目Argo Workflows实现复杂的离线任务编排。

 

2)全托管、免运维

 

全托管Kubernetes控制面和开源Argo Workflows,极大的减少用户运维负担,用户无需关注系统的运维和升级,可以专注于离线计算工作流的设计和优化。

 

3)性能调优,大规模

 

针对离线任务特点,进行Kubernetes控制面进行针对调优,例如:控制面自动伸缩,任务并行调度和精确限流,保障管控面针对离线任务的高性能和稳定性。

 

4)Serverless 极致弹性

 

基于阿里云弹性容器实例ECI运行工作流任务,开箱即用,运行完成即回收资源,可在多个区域和可用区调度资源,支持大规模工作流的运行,无需排队等待。

 

5)无缝迁移

 

全托管开源Argo Workflows,无缝兼容开源标准,无厂商绑定风险,无需修改现有 Argo 工作流,即可完成工作流的平滑迁移。

 

 

 

领域实践

 

 

阿里云容器服务Serverless Argo Workflows为用户提供了强大的工作流管理能力,特别是在需要处理大规模离线计算的任务中表现出色。在自动驾驶、科学计算、金融模拟、数字媒体等领域,其应用价值尤为显著,得到广泛实践。

 

 

 

 

 

未来展望

 

 

阿里云容器服务Serverless Argo Workflows大规模离线计算工作流平台作为Serverless实践标杆案例,引领了大规模离线任务处理新方法。未来会继续在Serverless、弹性、大规模等方向深耕,充分发挥标杆引领示范作用,进一步促进Serverless技术的高质量发展。欢迎使用钉钉扫描二维码或搜索群号加入我们。(钉钉群号:35688562

 

参考:

 

中国信通院 Serverless 应用实践案例集:

https://mp.weixin.qq.com/s/rz9F8s0frK0OIU9T-0iokQ

 

Serverless Argo Workflows:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/overview-12

 

创建工作流:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/user-guide/create-a-workflow-cluster

 

Serverless Argo Workflows 最佳实践:

https://help.aliyun.com/zh/ack/distributed-cloud-container-platform-for-kubernetes/use-cases/distributed-workflow-argo-cluster-best-practices/


我们是阿里巴巴云计算和大数据技术幕后的核心技术输出者。

欢迎关注 “阿里云基础设施”同名微信微博知乎

获取关于我们的更多信息~

相关实践学习
【AI破次元壁合照】少年白马醉春风,函数计算一键部署AI绘画平台
本次实验基于阿里云函数计算产品能力开发AI绘画平台,可让您实现“破次元壁”与角色合照,为角色换背景效果,用AI绘图技术绘出属于自己的少年江湖。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
相关文章
|
3月前
|
运维 监控 Cloud Native
【云故事探索】NO.17:国诚投顾的云原生 Serverless 实践
国诚投顾携手阿里云,依托Serverless架构实现技术全面升级,构建高弹性、智能化技术底座,提升业务稳定性与运行效率。通过云原生API网关、微服务治理与智能监控,实现流量精细化管理与系统可观测性增强,打造安全、敏捷的智能投顾平台,助力行业数字化变革。
【云故事探索】NO.17:国诚投顾的云原生 Serverless 实践
|
3月前
|
运维 监控 Cloud Native
【云故事探索】NO.17:国诚投顾的云原生 Serverless 实践
通过与阿里云深度合作,国诚投顾完成了从传统 ECS 架构向云原生 Serverless 架构的全面转型。新的技术架构不仅解决了原有系统在稳定性、弹性、运维效率等方面的痛点,还在成本控制、API 治理、可观测性、DevOps 自动化等方面实现了全方位升级。
|
7月前
|
存储 运维 Serverless
千万级数据秒级响应!碧桂园基于 EMR Serverless StarRocks 升级存算分离架构实践
碧桂园服务通过引入 EMR Serverless StarRocks 存算分离架构,解决了海量数据处理中的资源利用率低、并发能力不足等问题,显著降低了硬件和运维成本。实时查询性能提升8倍,查询出错率减少30倍,集群数据 SLA 达99.99%。此次技术升级不仅优化了用户体验,还结合AI打造了“一看”和“—问”智能场景助力精准决策与风险预测。
693 69
|
7月前
|
Cloud Native Serverless 流计算
云原生时代的应用架构演进:从微服务到 Serverless 的阿里云实践
云原生技术正重塑企业数字化转型路径。阿里云作为亚太领先云服务商,提供完整云原生产品矩阵:容器服务ACK优化启动速度与镜像分发效率;MSE微服务引擎保障高可用性;ASM服务网格降低资源消耗;函数计算FC突破冷启动瓶颈;SAE重新定义PaaS边界;PolarDB数据库实现存储计算分离;DataWorks简化数据湖构建;Flink实时计算助力风控系统。这些技术已在多行业落地,推动效率提升与商业模式创新,助力企业在数字化浪潮中占据先机。
442 12
|
9月前
|
Kubernetes 监控 Serverless
基于阿里云Serverless Kubernetes(ASK)的无服务器架构设计与实践
无服务器架构(Serverless Architecture)在云原生技术中备受关注,开发者只需专注于业务逻辑,无需管理服务器。阿里云Serverless Kubernetes(ASK)是基于Kubernetes的托管服务,提供极致弹性和按需付费能力。本文深入探讨如何使用ASK设计和实现无服务器架构,涵盖事件驱动、自动扩展、无状态设计、监控与日志及成本优化等方面,并通过图片处理服务案例展示具体实践,帮助构建高效可靠的无服务器应用。
|
10月前
|
负载均衡 Serverless 持续交付
云端问道9期实践教学-省心省钱的云上Serverless高可用架构
详细介绍了云上Serverless高可用架构的一键部署流程
198 10
|
1月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
396 29
|
2月前
|
存储 人工智能 Serverless
函数计算进化之路:AI 应用运行时的状态剖析
AI应用正从“请求-响应”迈向“对话式智能体”,推动Serverless架构向“会话原生”演进。阿里云函数计算引领云上 AI 应用 Serverless 运行时技术创新,实现性能、隔离与成本平衡,开启Serverless AI新范式。
402 12
|
7月前
|
SQL 分布式计算 Serverless
鹰角网络:EMR Serverless Spark 在《明日方舟》游戏业务的应用
鹰角网络为应对游戏业务高频活动带来的数据潮汐、资源弹性及稳定性需求,采用阿里云 EMR Serverless Spark 替代原有架构。迁移后实现研发效率提升,支持业务快速发展、计算效率提升,增强SLA保障,稳定性提升,降低运维成本,并支撑全球化数据架构部署。
759 56
鹰角网络:EMR Serverless Spark 在《明日方舟》游戏业务的应用
下一篇
oss云网关配置