AI 助理
备案控制台
开发者社区 ModelScope模型即服务 计算机视觉 正文

GPT-3 2.7B，ModelScope训练2周时间，大概需要多少张卡V100？

GPT-3 2.7B，ModelScope训练2周时间，大概需要多少张卡V100？

展开
收起
鸡蛋灌饼儿 2023-01-27 15:31:57 777 分享 版权
1 条回答
写回答
取消 提交回答
  • 凌云Cloud
    发表文章、提出问题、分享经验、结交志同道合的朋友

    训练模型所需的GPU数量取决于多种因素，例如模型大小、训练数据大小、批量大小、训练时的超参数等。对于GPT-3 2.7B这样的大型模型，训练时间和GPU数量会成正比关系，通常需要数十张V100甚至更多的GPU来训练。由于ModelScope的具体实现和硬件资源的不同，具体需要的GPU数量可能会有所不同。

    2023-02-17 21:51:16
    赞同 展开评论
相关问答
计算机视觉
通过modelscope环境搭建LLama Factory使用 WebUI微调训练，访问页面报错
522
1
0
在modelscope-funasr训练的样例batch size为啥是20000这么大呢？
103
1
0
modelscope-funasr训练没有生成model文件
139
1
0
ModelScope 使用mossformer的训练代码出现如下报错，该如何解决啊？
136
1
0
如何重置或者用干净的训练ModelScope模型 只训练自己的模型呢？
94
1
0
ModelScope训练之后不能merge-lora，也不能用vllm推理了吗？
117
1
0
modelscope-funasr的paraformer模型从0训练可以用来做 音频识别音素模型吗？
98
0
0
ModelScope中，在本地跑 每次训练都会出图中错，是什么问题？
72
1
0
调整了ModelScope参数，使用7张卡，每张24G， 但是还是报错，怎么解决?
172
1
0
modelscope中有没有pdf gpt或者doc chat类似的开源框架?
65
1
0
ModelScope模型即服务

计算机视觉

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

我要提问
收录在圈子:
计算机视觉
171
+ 订阅

相关文章

  • 【PDF提取内容改名】批量提取PDF指定区域内容重命名PDF文件，PDF自动提取内容命名的方案和详细步骤
  • 【繁体图片文字识别】竖排的繁体图片文字识别翻译，竖排的繁体图片文字如何识别，竖排繁体图片识别后转横排，竖排的繁体识别比较友好的方法
  • Baumer工业相机堡盟工业相机如何通过YoloV8深度学习模型实现裂缝的检测识别（C#代码UI界面版）
  • 腾讯混元最新开源：一张图，秒变游戏大片
  • OBS美颜美肌插件安装使用教程

    • 热门讨论

    热门文章

  • cpu部署报错 Torch not compiled with CUDA enabled
  • ModelScope中，模型下载默认路径在哪个路径？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • 如何下载modelscope模型？
  • ModelScope下载速度慢怎么解决？
  • com/action/joingroup?code=v1是什么意思
  • 服务器上onnxruntime-gpu 调用结束，如何释放显存
  • ModelScope中，大佬们4卡跑lora时，遇到这样的错，怎么解决？
  • 在ModelScope中，请问模型下载到本地的具体方法？
  • modelscope cache 环境变量是啥？
    • 展开全部
  • Qwen2.5-VL：阿里通义千问最新开源视觉语言模型，能够理解超过1小时的长视频
  • X-AnyLabeling：开源的 AI 图像标注工具，支持多种标注样式，适于目标检测、图像分割等不同场景
  • LHM：单图生成3D动画人！阿里开源建模核弹，高斯点云重构服装纹理
  • EchoMimicV2：阿里推出的开源数字人项目，能生成完整数字人半身动画
  • video-analyzer：开源视频分析工具，支持提取视频关键帧、音频转录，自动生成视频详细描述
  • UI-TARS：字节跳动开源专注于多平台 GUI 自动化交互的视觉语言模型
  • WorldScore：斯坦福开源世界生成模型评估新标杆：3000样本+九维指标，视频/4D/3D模型一网打尽
  • STAR：南京大学联合字节开源视频超分辨率增强生成框架，视频清晰度一键提升，支持从低分辨率视频生成高分辨率视频
  • Cobalt：开源的流媒体下载工具，支持解析和下载全平台的视频、音频和图片，支持多种视频质量和格式，自动提取视频字幕
  • InvSR：开源图像超分辨率生成模型，提升分辨率，修复老旧照片为超清图像
    • 展开全部
    还有其他疑问?
    咨询AI助理