开发者社区 > ModelScope模型即服务 > 正文

ModelScope里我在合并lora微调后的qwenvl没找到量化后的输出目录 怎么办?

你好,我在合并lora微调后的qwenvl,并量化的时候,device map显示的是cpu,等了半天,也没找到量化后的输出目录。
使用的是swift文档里提供的代码,量化采用的是gptq,以下是sh脚本信息,能帮忙看看吗?lQLPJxuWEwa7g3vMg80D6LCgy62XhnODxQayWDKCMzcA_1000_131.png运行结束后,只有这些输出文件lQLPJwg5VAe_FjvNAUbNAY6wDi6Cb33Nr8cGsljFK5faAA_398_326.png

展开
收起
防火防爆 2024-08-26 14:13:28 33 0
0 条回答
写回答
取消 提交回答

ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载