热门
你好,我在合并lora微调后的qwenvl,并量化的时候,device map显示的是cpu,等了半天,也没找到量化后的输出目录。使用的是swift文档里提供的代码,量化采用的是gptq,以下是sh脚本信息,能帮忙看看吗?运行结束后,只有这些输出文件
ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352