备案控制台

开发者社区 ModelScope模型即服务正文

modelscope中，单卡4090参数建议打开吗？

"
modelscope中，单卡4090参数建议打开吗？"

展开

收起

小小爱吃香菜 2024-03-17 12:50:37 115 版权

2 条回答

写回答

取消提交回答

为了利利

单卡不用。此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”

2024-03-18 20:39:34

赞同展开评论
三掌柜666

十分耕耘，一定会有一分收获！

楼主你好，据我所知在阿里云ModelScope中，单卡4090参数指的是使用单个显卡训练时的参数设置，建议根据具体情况来确定是否打开该参数。

由于单卡4090参数的作用是在单个显卡上实现更高效的训练性能，默认情况下，ModelScope会在单卡上使用较小的batch size进行训练，以适应显存的限制，而打开单卡4090参数后，ModelScope会尝试通过更高效的显存管理策略来实现更大的batch size，从而提高训练性能。

2024-03-17 17:51:33

赞同展开评论

相关问答

modelscope-funasr够支持直接在automodel类使用附加vad模型的参数吗？

89

0

0

ModelScope中生成比如几千个不同声音的tts，都的自己训练模型，可以调节参数去控制吗？

44

1

0

在modelscope-funasr中推理的输出结果准确率要比直接推理的低，是参数有问题吗？

53

1

0

自定义数据集路径有问题是ModelScope的启动参数不对吗？

35

1

0

ModelScope微调qwen2不同参数的模型，分别需要的最低硬件要求是多少？

111

1

0

ModelScope中，加载本地路径的文件报错了，是不是参数不对？

81

1

0

ModelScope中，把日志保存间隔时间参数调短吗？

37

1

0

modelscope-funasr这样是我们缺少什么参数吗？

72

1

0

ModelScope摩搭框架训练的时候有没有哪一个参数可以直接传进去的？

50

1

0

ModelScope进行推理的时候，进程还是使用第0块显卡， device参数没有生效，怎么解决？

57

1

0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！欢迎加入技术交流群：微信公众号：魔搭ModelScope社区，钉钉群号：44837352

我要提问

热门讨论

热门文章

ModelScope中，模型下载默认路径在哪个路径？

ModelScope下载速度慢怎么解决？

ModelScope qwen7b、14b、72b lora微调分别需要的显存和cpu内存是多少？

我希望通过damo-YOLO训练1500*1500的图片

com/action/joingroup?code=v1是什么意思

在魔塔社区-模型服务里面一键部署的deepseek模型怎么使用？

modelscope上跑报错，提示要pip install ttsfrd，搞不定

ModelScope有没有人知道windows安装ttsfrd的方法或者ttsfrd源码？

ModelScope有部署qwen2-72b的么，正常推理需要多大的显存？

无法导入 modelscope，已经pip install了

展开全部

深度评测 | 仅用3分钟，百炼调用满血版 Deepseek-r1 API，百万Token免费用，简直不要太爽。

WeaveFox：蚂蚁集团推出 AI 前端智能研发平台，能够根据设计图直接生成源代码，支持多种客户端和技术栈

通义万相Wan2.1视频模型开源！视频生成模型新标杆，支持中文字效+高质量视频生成

Qwen2.5-Max：阿里通义千问超大规模 MoE 模型，使用超过20万亿tokens的预训练数据

本地部署DeepSeek模型

MNN-LLM App：在手机上离线运行大模型，阿里巴巴开源基于 MNN-LLM 框架开发的手机 AI 助手应用

阿里云PAI部署DeepSeek及调用

CosyVoice 2.0：阿里开源升级版语音生成大模型，支持多语言和跨语言语音合成，提升发音和音色等的准确性

KTransformers：告别天价显卡！国产框架让单卡24G显存跑DeepSeek-R1 671B大模型：推理速度飙升28倍

vanna+qwen实现私有模型的SQL转换

展开全部

还有其他疑问?