gpt-3(1.3B)的预训练模型我加载到magatron-lm V3能加载进去进行推理吗?

gpt-3(1.3B)的预训练模型我加载到magatron-lm V3能加载进去进行推理吗?

展开
收起
真的很搞笑 2023-03-02 23:26:16 219 分享 版权
1 条回答
写回答
取消 提交回答
  • 是用这个repo吗,我们是用的GPT的架构,理论上是可以的。但是我们也没有专门去做过验证。推理的话16G应该够了 训练要32G,key有点不一样,模型离线导入到/root/~/.cache/modelscope/hub/damo下面了对应的文件夹里了,但是运行Model.from_pretrained的时候,还是会进行下载(主要是服务器上下载比较慢才从其他电脑下载好导入的),请问这个怎么解决,此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”

    2023-03-02 23:29:16
    赞同 展开评论

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

收录在圈子:
+ 订阅

热门讨论

热门文章

还有其他疑问?
咨询AI助理