AI 助理
文档备案控制台
开发者社区 ModelScope模型即服务 正文

24G显存，为啥显存爆了？

百川2-13B-对话模型-4bits量化版，为啥在8核 32GB 显存24G的modelscope环境跑不起来？难道24G是假的吗？

展开
收起
百川2-13B-预训练模型
lyxing 2025-03-07 21:46:23 362 分享 版权
0 条回答
写回答
取消 提交回答

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！欢迎加入技术交流群：微信公众号：魔搭ModelScope社区，钉钉答疑群：44837352

我要提问

热门讨论

热门文章

  • ModelScope中，模型下载默认路径在哪个路径？
  • com/action/joingroup?code=v1是什么意思
  • ModelScope下载速度慢怎么解决？
  • 如何下载modelscope模型？
  • 请问modelscope 中，Pipeline，修改配置参数， 要怎么修改？
  • 在魔塔社区-模型服务 里面一键部署的deepseek模型怎么使用？
  • modelscope MGeo可以对这种地址的名称进行标签的分类吗？
  • 请问Modelscope互联网如何访问Notebook的服务呢？
  • 外部网络如何访问modelscope notebook EAIS部署的应用
  • ModelScope哪里可以下到bge的embedding啊，我用来本地部署？
    • 展开全部
  • ModelScope是什么？魔搭社区AI模型开源社区，模型即服务（MaaS）的共享平台
  • 2026 上半年智能体AI Agent趋势报告 GitHub、PH、HF 三端全网数据调研
  • Silly Tavern 免费API保姆级教学
  • GLM-4V-Flash：智谱 AI 免费开放的图像理解大模型 API 接口
  • 阿里云产品七月刊来啦
  • HTTPS 原理
  • Dropout的深入理解（基础介绍、模型描述、原理深入、代码实现以及变种）
  • MNN-LLM App：在手机上离线运行大模型，阿里巴巴开源基于 MNN-LLM 框架开发的手机 AI 助手应用
  • DeepSeek-V4开源：百万上下文，Agent能力比肩顶级闭源模型
  • 阿里云通义千问向全社会开放！
    • 展开全部
    还有其他疑问?
    咨询AI助理