函数计算，请教一下，目前使用 SD 的自定义模型，冷启动大约要 40 多秒，有加速的可能性吗？
函数计算，请教一下，目前使用 SD 的自定义模型，冷启动大约要 40 多秒，有加速的可能性吗？
展开
收起
1
条回答
写回答
写回答
-
FC按量调用的SD冷启动耗时，当前差不多是这个水平
1.
SD on 本地应用启动耗时：~12s
SD on FC应用启动耗时：~16s（+4s）2.
SD on 本地模型加载耗时：~18s
SD on FC模型加载耗时：~26s （+8s）3.
SD on 本地端到端总耗时：~30s
SD on FC端到端总耗时：~42s（+12s）可以看到，本地拉起一个SD（含SD1.5基础模型加载）就需要耗时~30s，这部分应用侧耗时大头不太好解，都是必要的三方库加载（torch）、以及模型初始化；FC计算环境相比本地，增加了额外的~12s。
如果业务当前接受不了首次冷启动，可以使用FC的预留实例：https://help.aliyun.com/zh/fc/use-cases/real-time-inference-scenarios?spm=a2c4g.11186623.0.0.5ad47541cyVct2
另外，我也想了解下，一般AIGC业务都是准实时，耗时一般都在10s级别，您这边业务能接受的冷启动耗时是个什么样子的水平
此答案来自钉钉群“阿里函数计算官网客户”
2023-09-05 16:50:43赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
热门讨论
热门文章
sd界面里为啥没有lora模块选项呀？
78963
哪位大佬知道stable diffusion生成的图片存在哪个文件夹?
10714
按照函数计算FC的comfyUI部署的，comfyUI界面上没有显示Manager 按钮，是为什么？
960
求助下大家，sd云端跑的时候报这个错误
14877
请问主域名备案了，子域名还要备案吗？
6979
sd从网址安装插件报错：AssertionError: extension access disab
12293
部署完成后第一次打开报错，进不去怎么解决？
2513
GPU实例中T4和A10两款性能差别多大？另外如何在s.yaml中指定GPU型号呢？
7552
在终端怎么升级python？
6013
Dokerfile构建总是超时，怎么处理？
621
展开全部
thinkphp项目迁移到函数计算
28222
快速搭建基于 Serverless 的 .NET Core 数据库应用
24780
首次揭秘：阿里巴巴中间件在 Serverless 技术领域的探索
21670
玩转阿里云函数计算(一)----Java Http 触发器极速迁移传统 Spring 应用
22607
入门篇：函数计算的基本概念和通用场景概述
19212
php runtime 中 headers already sent 问题解决方案
18439
浅析基于 Serverless 的前后端一体化框架
18189
开发函数计算的正确姿势 —— 使用 ROS 进行资源编排
15572
基于阿里云Serverless架构下函数计算的最新应用场景详解（一）
15721
阿里云函数计算 - 事件驱动的serverless计算平台
16373
展开全部
