备案控制台

开发者社区

开发者社区 > ModelScope模型即服务 > 正文

量化过的modelscope模型做微调，再做合并会有问题吗？

量化过的modelscope模型做微调，再做合并会有问题，所以用比如 qwen1half-7b-chat 做微调，再量化？

展开

收起

Lucidly 2024-04-16 20:49:30 20 0

1 条回答

写回答

取消提交回答

为了利利

是的，用比如 qwen1half-7b-chat 做微调，再量化。此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”

2024-04-16 22:03:58

赞同 1 展开评论打赏

相关问答

微调了seqGPT,后面在推理ModelScope使用的时候报错，这是什么原因呢？

11

1

0

modelscope文章中提到的微调后的模型，可以分享出来吗？

8

0

0

modelscope-funasr中，asr的paraformer模型，有量化前的模型吗？

19

2

0

modelscope-funasr基于ModelScope进行模型的推理，可以用本地下载好的模型吗？

13

1

0

modelscope微调seqgpt 是读取模型报错是什么原因呢？

13

1

0

新modelscope模型一般合并后默认放在哪里的？

16

1

0

modelscope自定义合并后新的模型保存路径，要怎么设置？

14

1

0

modelscope微调好后的怎么合并成一个新的qwen-7b-chat模型呢？

28

1

0

ModelScope中qwen模型魔塔的swift训练和官网的训练比，需要的显存小一点，是为什么？

25

0

0

modelscope-funasr1.0 微调热词模型，单机多卡出现上述问题，会是啥原因？

21

0

0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！

我要提问

热门讨论

热门文章

ModelScope中，模型下载默认路径在哪个路径？

com/action/joingroup?code=v1是什么意思

在ModelScope中，想了解一下Qwen-14B微调用的训练数据该如何处理？

ModelScope的Qwen1.5-14B-Chat需要多少大显存？

请问ModelScope中，怎么修改本地运行，模型自动下载到 c 盘下？

ModelScope qwen7b、14b、72b lora微调分别需要的显存和cpu内存是多少？

ModelScope中，请问Qwen-14B-Chat-Int4运行最少需要多少内存？

我希望通过damo-YOLO训练1500*1500的图片

人工智能大模型如何引领智能时代的革命？

如何训练属于自己的“通义千问”呢？

展开全部

手把手教你捏一个自己的Agent

阿里云通义千问向全社会开放！

Llama 3开源！魔搭社区手把手带你推理，部署，微调和评估

社区供稿 | FunASR 语音大模型在 Arm Neoverse 平台上的优化实践

社区供稿 | Llama3-8B中文版！OpenBuddy发布新一代开源中文跨语言模型

通义千问72B、1.8B、Audio模型开源！魔搭社区最佳实践来啦！

Llama3 中文通用Agent微调模型来啦！（附手把手微调实战教程）

Qwen1.5开源！魔搭最佳实践来啦！

Qwen1.5-MoE开源！魔搭社区推理训练最佳实践教程来啦！

ChatGPT中文版杀疯了,已登录AI模型市场

展开全部

相关课程

更多

个性化语音合成模型微调

40

1

去学习

ModelScope社区Library技术架构介绍

174

1

去学习

相关电子书

更多

视觉AI能力的开放现状及ModelScope实战 立即下载

ModelScope助力语音AI模型创新与应用 立即下载

低代码开发师（初级）实战教程 立即下载