AI 助理
备案控制台
开发者社区 ModelScope模型即服务 计算机视觉 正文

在ModelScope中，有没有计划出多机多节点的全量？

在ModelScope中，有没有计划出多机多节点的全量，lora微调llama70b,bloom 176b,falcon180b的代码呢？

展开
收起
LLLA 2023-09-19 22:08:53 106 分享 版权
1 条回答
写回答
取消 提交回答
  • AAAOY

    可以试试 MP+DDP的版本。 可以参考 qwen 7b chat的full mp ddp那个文件夹的sh 此回答来自“魔搭ModelScope开发者联盟群 ①”

    2023-09-19 23:14:59
    赞同 展开评论
相关问答
ModelScope中，全量训练是从头到尾开发一个新的大模型是吧？继续训练是指什么？
115
1
0
ModelScope中qwen1.5-72b全量微调需要多少GPU资源呢？
555
2
0
modelscope源码是微调是全量微调，最新的swift可以选择lora微调和qlora是吧？
206
1
0
ModelScope中请问分NER布式训练如何控制只有某一个节点执行评测？
72
1
0
想问一下ModelScope swift全量微调，怎么设置呢？
199
2
0
ModelScope如果我想支持大并发的访问，是不是就是只能集群多部署节点了，一个节点处理一个请求？
153
1
0
ModelScope b节点一定要存在吗？
59
1
0
modelscope-funasr模型下载下来后调用 咋提示 未注册呀？
292
0
0
请问用modelscope里swift的dpo微调模型的断点Debug方式，有相关文档说明吗？
217
1
0
modelscope里为什么我下载到本地的模型，却找不到？
377
1
0
ModelScope模型即服务

计算机视觉

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

我要提问

相关文章

  • CMSIS-NN：ARM Cortex-M处理器的高效神经网络内核——论文解读
  • μNAS：面向微控制器的约束神经架构搜索——论文解读
  • AR 巡检与普通巡检有哪些区别，有哪些优势｜阿法龙XR云平台
  • RFID技术让高校电动车进出更简便

    • 热门讨论

    热门文章

  • cpu部署报错 Torch not compiled with CUDA enabled
  • ModelScope中，模型下载默认路径在哪个路径？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • 如何下载modelscope模型？
  • ModelScope下载速度慢怎么解决？
  • com/action/joingroup?code=v1是什么意思
  • 服务器上onnxruntime-gpu 调用结束，如何释放显存
  • ModelScope中，大佬们4卡跑lora时，遇到这样的错，怎么解决？
  • 在ModelScope中，请问模型下载到本地的具体方法？
  • modelscope cache 环境变量是啥？
    • 展开全部
  • Qwen2.5-VL：阿里通义千问最新开源视觉语言模型，能够理解超过1小时的长视频
  • X-AnyLabeling：开源的 AI 图像标注工具，支持多种标注样式，适于目标检测、图像分割等不同场景
  • LHM：单图生成3D动画人！阿里开源建模核弹，高斯点云重构服装纹理
  • video-analyzer：开源视频分析工具，支持提取视频关键帧、音频转录，自动生成视频详细描述
  • EchoMimicV2：阿里推出的开源数字人项目，能生成完整数字人半身动画
  • UI-TARS：字节跳动开源专注于多平台 GUI 自动化交互的视觉语言模型
  • STAR：南京大学联合字节开源视频超分辨率增强生成框架，视频清晰度一键提升，支持从低分辨率视频生成高分辨率视频
  • InvSR：开源图像超分辨率生成模型，提升分辨率，修复老旧照片为超清图像
  • WorldScore：斯坦福开源世界生成模型评估新标杆：3000样本+九维指标，视频/4D/3D模型一网打尽
  • Cobalt：开源的流媒体下载工具，支持解析和下载全平台的视频、音频和图片，支持多种视频质量和格式，自动提取视频字幕
    • 展开全部
    还有其他疑问?
    咨询AI助理