AI 助理
备案控制台登录注册
开发者社区 ModelScope模型即服务 计算机视觉 正文

ModelScope中求教一下，我GPU显存不够，怎么强制用CPU运行魔搭LLM模型呀？

ModelScope中求教一下，我GPU显存不够，怎么强制用CPU运行魔搭LLM模型呀

展开
收起
超爱吃辣 2023-09-27 21:25:37 350 发布于辽宁 分享
分享
 版权
举报
1 条回答
写回答
取消 提交回答
  • 多麻辣哦

    你试试量化呗——此回答整理自钉群：魔搭ModelScope开发者联盟群 ①

    2023-09-27 23:06:13 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
相关问答
求助，人工智能平台 PAI-DSW运行模型时，找不到 GPU
93
0
0
modelscope-funasr怎么设置使得模型可以用CUDA0以外的其他gpu？
33713
1
0
modelscope-funasr服务端部署的话，推荐什么样的GPU？
86
0
0
ModelScope为啥使用notebook的cpu版本，finetune.sh脚本去训练一直失败？
54
1
0
在modelscope-funasr如果使用GPU的话这个编译需要改什么？
71
0
0
modelscope-funasr的GPU调用失败了，是什么原因？
72
0
0
modelscope-funasr的 docker gpu1.1 容器中启动服务时，报这个是啥问题？
75
1
0
modelscope-funasr最新的gpu高吞吐服务用的模型和原来cpu的参数量是一样的么？
67
0
0
modelscope-funasr最新的gpu高吞吐服务用的模型和原来cpu的是一样的么？
66
0
0
怎么搞才能运行起来？怎么从MS发到自己的GPU服务器?
34
1
0
ModelScope模型即服务

计算机视觉

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

我要提问

相关文章

  • 基于FPGA的信号DM编解码实现,包含testbench和matlab对比仿真
  • 【硬件测试】基于FPGA的256QAM基带通信系统开发与硬件片内测试,包含信道模块,误码统计模块,可设置SNR
  • DeepSeek开源放大招：FlashMLA让算力狂飙！曝光低成本秘笈
  • DeepSeek V3+R1满血微调工具上线！一键启动，硬件要求降10倍
  • 马斯克20万块GPU炼出Grok-3，暴击DeepSeek R1数学屠榜！疯狂复仇OpenAI

    • 热门讨论

    热门文章

  • ModelScope中，模型下载默认路径在哪个路径？
  • ModelScope下载速度慢怎么解决？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • com/action/joingroup?code=v1是什么意思
  • ModelScope有没有人知道windows安装ttsfrd的方法或者ttsfrd源码？
  • modelscope cache 环境变量是啥？
  • 我想使用 Modelscope 自己下载下来的本地模型，不知道怎么操作？
  • 如何下载modelscope模型？
  • ModelScope中，本地部署魔搭镜像，怎么下载？有点看不懂
  • 服务器上onnxruntime-gpu 调用结束，如何释放显存
    • 展开全部
  • EchoMimicV2：阿里推出的开源数字人项目，能生成完整数字人半身动画
  • Step-Video-T2V：碾压Sora？国产开源巨兽Step-Video-T2V杀到：300亿参数一键生成204帧视频
  • Qwen2.5-VL：阿里通义千问最新开源视觉语言模型，能够理解超过1小时的长视频
  • UI-TARS：字节跳动开源专注于多平台 GUI 自动化交互的视觉语言模型
  • SkyReels-V1：短剧AI革命来了！昆仑开源视频生成AI秒出影视级短剧，比Sora更懂表演！
  • AnchorCrafter：中科院联合腾讯推出的AI虚拟主播带货视频制作技术
  • VISION XL：支持四倍超分辨率的 AI 视频修复处理工具，提供去除模糊、修复缺失等功能
  • BEN2：一键快速抠图！自动移除图像和视频中的背景，支持在线使用
  • Migician：清北华科联手放大招！多图像定位大模型问世：3秒锁定跨画面目标，安防监控迎来AI革命！
  • Cobalt：开源的流媒体下载工具，支持解析和下载全平台的视频、音频和图片，支持多种视频质量和格式，自动提取视频字幕
    • 展开全部
    还有其他疑问?
    咨询AI助理
    AI助理

    你好，我是AI助理

    可以解答问题、推荐解决方案等