AI 助理
备案控制台
开发者社区 ModelScope模型即服务 正文

ModelScope中有两块gpu，但貌似只能用到一块，怎么解决呢？

"30f87cb9674271e9c96a67a15bb6531d.jpg
ModelScope中有两块gpu，但貌似只能用到一块，Qwen1___5-7B-Chat-GPTQ-Int4，怎么解决呢？"

展开
收起
小小爱吃香菜 2024-05-21 21:46:16 65 分享 版权
1 条回答
写回答
取消 提交回答
相关问答
modelscope-funasr怎么设置使得模型可以用CUDA0以外的其他gpu？
33942
1
0
modelscope-funasr的GPU调用失败了，是什么原因？
143
0
0
modelscope-funasr的GPU离线转写服务的说话人识别模块要怎么配置啊？
247
0
0
modelscope-funasr能支持用gpu来做实时转写吗？
152
0
0
modelscope-funasr最新的gpu高吞吐服务用的模型和原来cpu的是一样的么？
139
0
0
modelscope-funasr使用gpu转写服务部署指南，asr模型还是会需要导出为onnx吗？
149
0
0
modelscope-funasr服务端部署的话，推荐什么样的GPU？
213
0
0
modelscope-funasr的 docker gpu1.1 容器中启动服务时，报这个是啥问题？
194
1
0
modelscope-funasr最新的gpu高吞吐服务用的模型和原来cpu的参数量是一样的么？
186
0
0
ModelScope中示例页面的GPU版本和CPU版本。这两个不同版本会影响推理效率吗？
203
1
0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！欢迎加入技术交流群：微信公众号：魔搭ModelScope社区，钉钉群号：44837352

我要提问

相关文章

  • 裸机云与GPU性能深度解析：为何它是高性能计算的基石
  • 解决方案体验 | 基于 GPU 云服务器微调 Qwen3 模型
  • 哈希极化、拓扑盲点与拥塞抖动：主流端网协同方案如何缓解万卡集群通信瓶颈？
  • 现在选购阿里云服务器有哪些优惠政策？最新包年包月与按量付费优惠和活动价格参考
  • TensorRT 和 ONNX Runtime 推理优化实战：10 个降低延迟的工程技巧

    • 热门讨论

    热门文章

  • 如何训练属于自己的AI大模型呢？有没有大佬有相关文档参考学习下
  • dataset的版本问题导致与modelscope不兼容
  • ModelScope下载速度慢怎么解决？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • qwen3-32b和qwen-2.5-32b-Instruct有什么区别
  • ModelScope中，模型下载默认路径在哪个路径？
  • com/action/joingroup?code=v1是什么意思
  • ModelScope中，大佬们4卡跑lora时，遇到这样的错，怎么解决？
  • 如何下载modelscope模型？
  • 从modelscope下载模型失败，怎么回事？
    • 展开全部
  • 中企投资印度新能源“有戏”吗？
  • Qwen3-VL新成员 2B、32B来啦！更适合开发者体质
  • 嵌入式开发必看！Keil uVision5 MDK 5.39 详细安装步骤+汉化+安装包
  • AgentScope：阿里开源多智能体低代码开发平台，支持一键导出源码、多种模型API和本地模型部署
  • MNN-LLM App：在手机上离线运行大模型，阿里巴巴开源基于 MNN-LLM 框架开发的手机 AI 助手应用
  • 嵌入式开发必备！Keil uVision5 C51 V9.61 安装激活 + 汉化完整教程, 含（Keil MDK 5.39）
  • Manga Image Translator：开源的漫画文字翻译工具，支持多语言翻译并嵌入原图，保持漫画的原始风格和布局
  • 智胜未来：国内大模型+Agent应用案例精选，以及主流Agent框架开源项目推荐
  • Dolphin：40语种+22方言！清华联合海天瑞声推出的语音识别大模型，识别精度超Whisper两代
  • UI-Ins：让 GUI 智能体真正“看懂”用户指令的新范式
    • 展开全部
    还有其他疑问?
    咨询AI助理