课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

本文涉及的产品
Serverless 应用引擎 SAE,800核*时 1600GiB*时
函数计算FC,每月15万CU 3个月
简介: AIGC无处不在,把AI应用构建于Serverless之上

Serverless AI训练营:课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

课程地址:https://developer.aliyun.com/trainingcamp/1eeaedf056f14ad98e9986c31068e939?spm=a2c6h.26142516.J_2566289780.1.37c67cbd7bCsFs

课时1:AIGC无处不在,把AI应用构建于Serverless之上(二)

二、通用AI应用

1、基本了解

以上列出的场景都是离散且并不通用的AI型的应用,可能无法与实际业务结合。以下展示了通用AI应用的架构图:

image.png

 

如上图所示,用户通过自然语言输入到应用程序,应用程序中具有智能体Agent,其实质上是由提示工程加模型服务的调用构成的,将用户的输入与提示模板结合之后,作为大语言模型的完整输入,利用大语言模型作自然语言的解析及相应的逻辑推理,进而可以继续使用专业领域的模型,如图生文、图生图、文生视频模型实现多模态的能力,为大模型安装“眼睛”“耳朵”。

此外,还可以让大模型调用一些扩展,如数据库查询、搜索、计算等,这类似于于ChatGPT中的Plugin能力。此时即形成了一个通用的AI应用,它既能够理解自然语言,也能够接触物理世界,甚至可以拟人化的进行图文的识别。因此,本质上通用AI应用的最大特性就是可以与实际业务紧密结合。

2、通用AI 技术

在上面的内容中提到,本质上通用AI的核心是对于模型服务的调用,这是非常标准的FaaS + BaaS的结合,是无状态服务的调用。但实际的应用程序中也会包括数据的存储、缓存的能力,这类能力只需要通过BaaS的方式平滑地增加即可。这里提到的“扩展能力”是一种轻量但又非常频繁使用的能力。在“扩展能力”的理论上,我们可以无限增加,这意味着应用程序能够提供的服务上限很高,但需要支持上线、迭代的能力。因此,我们将其看作函数级别的能力。综上,通用AI应用与Serverless之间有许多相似点,包括FaaS + BaaS模式以及函数级的扩展能力。

 

三、Serverless平台的优势

image.png

 

1、满足通用AI应用扩展能力的诉求

2、极致弹性

Serverless平台可以快速帮助交付计算。当应用有大规模的流量爆发时,也无需担心因此导致系统宕机。

3、极致效率

以阿里云函数计算为例,其已经集成了90款云产品的服务,这些服务可以直接使用,增强应用的能力。

4、极致成本

Serverless平台按照实际使用收费,如果应用有明显的波峰和波谷,其对于使用者来说十分划算。且当服务作为商业产品交付给用户时,也可以作为吸引用户的核心的优势。

 

四、AI应用构建于Serverless的优势

从企业最关注的效益出发,即成本/效率、市场商机TimeToMarket以及系统的安全和稳定(包括可用性、可扩展性和质量)。

如下图所示:

 

image.png

 

AI应用与Serverless结合后,其需求皆可满足,包括AI Action能力以函数粒度快速构建发布,AI应用满足商业化、有SLA保障,AI应用具备多环境能力、完备的可预测实现,AI应用的多Agent异步实现,AI 应用多实例部署启动,AI应用无状态约束、AI应用无状态约束、集群多活。这意味当应用自开始构建在Serverless平台上开始,就无需再去担心其未来的长足发展,无需担心非业务侧的其他能力,如多活或单点故障以及水平扩展等能力,可以无后顾之忧地直接快速扩展商业。这是AI应用带来的优势,远比自建服务器或服务器集群更加方便。

 

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
6天前
|
人工智能 自然语言处理 Serverless
阿里云函数计算 x NVIDIA 加速企业 AI 应用落地
阿里云函数计算与 NVIDIA TensorRT/TensorRT-LLM 展开合作,通过结合阿里云的无缝计算体验和 NVIDIA 的高性能推理库,开发者能够以更低的成本、更高的效率完成复杂的 AI 任务,加速技术落地和应用创新。
|
22天前
|
机器学习/深度学习 机器人 Serverless
FaaS 的应用场景
FaaS 的应用场景
|
22天前
|
Serverless API 异构计算
函数计算产品使用问题之修改SD模版应用的运行环境
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
22天前
|
运维 Serverless 网络安全
函数计算产品使用问题之通过仓库导入应用时无法配置域名外网访问,该如何排查
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
18天前
|
Cloud Native 关系型数据库 Serverless
基于阿里云函数计算(FC)x 云原生 API 网关构建生产级别 LLM Chat 应用方案最佳实践
本文带大家了解一下如何使用阿里云Serverless计算产品函数计算构建生产级别的LLM Chat应用。该最佳实践会指导大家基于开源WebChat组件LobeChat和阿里云函数计算(FC)构建企业生产级别LLM Chat应用。实现同一个WebChat中既可以支持自定义的Agent,也支持基于Ollama部署的开源模型场景。
125 10
|
16天前
|
JSON Serverless 数据格式
函数计算生成冰冻风格的AIGC图像
【9月更文挑战第05天】
33 3
|
22天前
|
运维 监控 Serverless
函数计算产品使用问题之应用怎么更换代码源
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
25天前
|
前端开发 小程序 Serverless
异步任务处理系统问题之阿里云函数计算FC的应用场景有哪些
异步任务处理系统问题之阿里云函数计算FC的应用场景有哪些
|
22天前
|
域名解析 运维 网络协议
函数计算产品使用问题之创建了两个相同区域的Stable Diffusion应用,出现只能正常使用一个应用,该如何解决
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
22天前
|
运维 监控 Serverless
函数计算产品使用问题之怎么查询在特定时间段内应用的调用次数
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。

热门文章

最新文章

相关产品

  • 函数计算