函数计算，有个问题 就是我之前设计的是排队机制 就一个模型实例 来多少请求排队执行 您现在的高并发是
函数计算，有个问题 就是我之前设计的是排队机制 就一个模型实例 来多少请求排队执行 您现在的高并发是支持不用排队就能并发推理的是吧？
每个模型占用2-3G显存，项目刚上线，目前18个AI产品在运行，量不是很大，接下来在准备凑足100个，您给分析一下推荐哪款付费方式划算。
展开
收起
1
条回答
写回答
写回答
-
您可以先在函数计算上将模型推理服务POC跑一下，看看有没有问题，特别是首次推理的冷启动能否接受
如果冷启动满足业务要求：建议使用函数计算的按量模式，仅对请求阶段进行计费
如果冷启动不满足业务要求：建议使用函数计算的弹性预留模式，通过合理的设置弹性预留策略（按时伸缩、按并发度伸缩等），来进行降本。具体可见：https://help.aliyun.com/zh/fc/use-cases/scenarios/?spm=a2c4g.11186623.0.0.515f6c9bPb8eF4
建议优先在函数计算上POC一下，实际跑一下看看。
此答案来自钉钉群“阿里函数计算官网客户”
2023-09-17 09:04:58赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
函数计算一键部署ComfyUI绘画平台的优势有哪些？
1840
sd界面里为啥没有lora模块选项呀？
77505
请问主域名备案了，子域名还要备案吗？
5105
sd从网址安装插件报错：AssertionError: extension access disab
10470
GPU实例中T4和A10两款性能差别多大？另外如何在s.yaml中指定GPU型号呢？
6688
在终端怎么升级python？
4788
在图像处理应用场景下，Serverless架构的优势体现在哪些方面？
3185
哪位大佬知道stable diffusion生成的图片存在哪个文件夹?
9915
Serverless 应用引擎这里的阿里云应用试用，想取消怎么取消？
552
函数计算SD上装了 inpaint anything这个插件，但是不显示怎么办？
644
展开全部
Serverless技术架构——极简运维，无限扩容
25062
玩转阿里云函数计算(一)----Java Http 触发器极速迁移传统 Spring 应用
22363
入门篇：函数计算的基本概念和通用场景概述
19027
php runtime 中 headers already sent 问题解决方案
18309
浅析基于 Serverless 的前后端一体化框架 | 7月2号云栖夜读
16282
开发函数计算的正确姿势 —— 使用 ROS 进行资源编排
15451
实践篇：搭建无服务器应用--函数计算+API网关+云市场（提供手机号归属地查询服务）
16925
大道至简 - 基于Docker的Serverless探索之旅
17450
阿里云函数计算 - 事件驱动的serverless计算平台
16240
15+文章详细讲述Serverless：开启函数计算时代！（含PDF下载）
13278
展开全部
