课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

简介: AIGC无处不在,把AI应用构建于Serverless之上

Serverless AI训练营:课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

课程地址:https://developer.aliyun.com/trainingcamp/1eeaedf056f14ad98e9986c31068e939?spm=a2c6h.26142516.J_2566289780.1.37c67cbd7bCsFs

课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

二、通用AI应用

1、基本了解

以上列出的场景都是离散且并不通用的AI型的应用,可能无法与实际业务结合。以下展示了通用AI应用的架构图:

image.png

 

如上图所示,用户通过自然语言输入到应用程序,应用程序中具有智能体Agent,其实质上是由提示工程加模型服务的调用构成的,将用户的输入与提示模板结合之后,作为大语言模型的完整输入,利用大语言模型作自然语言的解析及相应的逻辑推理,进而可以继续使用专业领域的模型,如图生文、图生图、文生视频模型实现多模态的能力,为大模型安装“眼睛”“耳朵”。

此外,还可以让大模型调用一些扩展,如数据库查询、搜索、计算等,这类似于于ChatGPT中的Plugin能力。此时即形成了一个通用的AI应用,它既能够理解自然语言,也能够接触物理世界,甚至可以拟人化的进行图文的识别。因此,本质上通用AI应用的最大特性就是可以与实际业务紧密结合。

2、通用AI 技术

在上面的内容中提到,本质上通用AI的核心是对于模型服务的调用,这是非常标准的FaaS + BaaS的结合,是无状态服务的调用。但实际的应用程序中也会包括数据的存储、缓存的能力,这类能力只需要通过BaaS的方式平滑地增加即可。这里提到的“扩展能力”是一种轻量但又非常频繁使用的能力。在“扩展能力”的理论上,我们可以无限增加,这意味着应用程序能够提供的服务上限很高,但需要支持上线、迭代的能力。因此,我们将其看作函数级别的能力。综上,通用AI应用与Serverless之间有许多相似点,包括FaaS + BaaS模式以及函数级的扩展能力。

 

三、Serverless平台的优势

image.png

 

1、满足通用AI应用扩展能力的诉求

2、极致弹性

Serverless平台可以快速帮助交付计算。当应用有大规模的流量爆发时,也无需担心因此导致系统宕机。

3、极致效率

以阿里云函数计算为例,其已经集成了90款云产品的服务,这些服务可以直接使用,增强应用的能力。

4、极致成本

Serverless平台按照实际使用收费,如果应用有明显的波峰和波谷,其对于使用者来说十分划算。且当服务作为商业产品交付给用户时,也可以作为吸引用户的核心的优势。

 

四、AI应用构建于Serverless的优势

从企业最关注的效益出发,即成本/效率、市场商机TimeToMarket以及系统的安全和稳定(包括可用性、可扩展性和质量)。

如下图所示:

 

image.png

 

AI应用与Serverless结合后,其需求皆可满足,包括AI Action能力以函数粒度快速构建发布,AI应用满足商业化、有SLA保障,AI应用具备多环境能力、完备的可预测实现,AI应用的多Agent异步实现,AI 应用多实例部署启动,AI应用无状态约束、AI应用无状态约束、集群多活。这意味当应用自开始构建在Serverless平台上开始,就无需再去担心其未来的长足发展,无需担心非业务侧的其他能力,如多活或单点故障以及水平扩展等能力,可以无后顾之忧地直接快速扩展商业。这是AI应用带来的优势,远比自建服务器或服务器集群更加方便。

 

相关实践学习
【玩转ComfyUI】基于函数计算一键部署AI生图平台ComfyUI
本次实验将带大家通过使用阿里云产品函数计算FC,快速使用ComfyUI实现更高质量的图像生成。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
相关文章
|
11月前
|
云安全 人工智能 安全
Dify平台集成阿里云AI安全护栏,构建AI Runtime安全防线
阿里云 AI 安全护栏加入Dify平台,打造可信赖的 AI
4195 166
|
11月前
|
人工智能 Java Nacos
基于 Spring AI Alibaba + Nacos 的分布式 Multi-Agent 构建指南
本文将针对 Spring AI Alibaba + Nacos 的分布式多智能体构建方案展开介绍,同时结合 Demo 说明快速开发方法与实际效果。
5708 115
|
11月前
|
云安全 人工智能 自然语言处理
阿里云x硅基流动:AI安全护栏助力构建可信模型生态
阿里云AI安全护栏:大模型的“智能过滤系统”。
3003 120
|
11月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
963 30
|
11月前
|
人工智能 测试技术 API
构建AI智能体:二、DeepSeek的Ollama部署FastAPI封装调用
本文介绍如何通过Ollama本地部署DeepSeek大模型,结合FastAPI实现API接口调用。涵盖Ollama安装、路径迁移、模型下载运行及REST API封装全过程,助力快速构建可扩展的AI应用服务。
2851 8
|
11月前
|
人工智能 运维 安全
加速智能体开发:从 Serverless 运行时到 Serverless AI 运行时
在云计算与人工智能深度融合的背景下,Serverless 技术作为云原生架构的集大成者,正加速向 AI 原生架构演进。阿里云函数计算(FC)率先提出并实践“Serverless AI 运行时”概念,通过技术创新与生态联动,为智能体(Agent)开发提供高效、安全、低成本的基础设施支持。本文从技术演进路径、核心能力及未来展望三方面解析 Serverless AI 的突破性价值。
|
11月前
|
机器学习/深度学习 人工智能 Serverless
吉利汽车携手阿里云函数计算,打造新一代 AI 座舱推理引擎
当前吉利汽车研究院人工智能团队承担了吉利汽车座舱 AI 智能化的方案建设,在和阿里云的合作中,基于星睿智算中心 2.0 的 23.5EFLOPS 强大算力,构建 AI 混合云架构,面向百万级用户的实时推理计算引入阿里云函数计算的 Serverless GPU 算力集群,共同为智能座舱的交互和娱乐功能提供大模型推理业务服务,涵盖的场景如针对模糊指令的复杂意图解析、文生图、情感 TTS 等。
|
11月前
|
消息中间件 人工智能 安全
构建企业级 AI 应用:为什么我们需要 AI 中间件?
阿里云发布AI中间件,涵盖AgentScope-Java、AI MQ、Higress、Nacos及可观测体系,全面开源核心技术,助力企业构建分布式多Agent架构,推动AI原生应用规模化落地。
988 0
构建企业级 AI 应用:为什么我们需要 AI 中间件?
|
11月前
|
SQL 人工智能 机器人
AI Agent新范式:FastGPT+MCP协议实现工具增强型智能体构建
FastGPT 与 MCP 协议结合,打造工具增强型智能体新范式。MCP 如同 AI 领域的“USB-C 接口”,实现数据与工具的标准化接入。FastGPT 可调用 MCP 工具集,动态执行复杂任务,亦可作为 MCP 服务器共享能力。二者融合推动 AI 应用向协作式、高复用、易集成的下一代智能体演进。
1293 0
|
11月前
|
人工智能 API 开发工具
构建AI智能体:一、初识AI大模型与API调用
本文介绍大模型基础知识及API调用方法,涵盖阿里云百炼平台密钥申请、DashScope SDK使用、Python调用示例(如文本情感分析、图像文字识别),助力开发者快速上手大模型应用开发。
3359 18
构建AI智能体:一、初识AI大模型与API调用

热门文章

最新文章

相关产品

  • 函数计算