开发者社区 > 云原生 > Serverless > 正文

我的函数代码中统计了一个深度学习模型加载的时间,一个大小为13M的模型利用torch加载模型并传递到

我的函数代码中统计了一个深度学习模型加载的时间,一个大小为13M的模型利用torch加载模型并传递到gpu需要十多秒,本地测试的话则两三秒,这个是函数这个功能自身的限制吗?

展开
收起
绿子直子 2023-02-07 15:23:47 506 0
2 条回答
写回答
取消 提交回答
  • 这并不一定是函数本身的限制。这可能与您使用的硬件或网络连接有关。例如,如果您在GPU上运行模型,那么加载模型的时间可能比在CPU上运行模型要长。此外,如果您在网络连接上运行模型,连接的速度也会影响加载时间。

    2023-02-07 17:53:48
    赞同 展开评论 打赏
  • 如果是冷启动,这个耗时是差不多的,因为计算节点需要从远端拉取镜像(依赖、模型)至本地,然后启动GPU容器。

    按量GPU模式:有冷启动,但成本最优(仅请求处理收费) 弹性预留GPU模式:无冷启动,但成本会贵一些(容器存活期收费)

    此答案来自钉钉群“阿里函数计算官网客户"

    2023-02-07 17:26:08
    赞同 展开评论 打赏

快速交付实现商业价值。

相关电子书

更多
深度学习的最新进展 立即下载
搜狗深度学习技术在广告推荐领域的应用 立即下载
深度学习在电商搜索和聊天机器人中的应用 立即下载