AI 助理
备案控制台
开发者社区 ModelScope模型即服务 正文

Modelscope的ftd模型，在export之前是正常的，export之后回答就边了呢？

"Modelscope的ftd模型，在export之前是正常的，export之后回答就边了呢？ 导出命令CUDA_VISIBLE_DEVICES=0 swift export \
--ckpt_dir /root/tsq_project/swift/examples/pytorch/llm/output/qwen1half-0_5b-chat/v0-20240412-094253/checkpoint-704 --load_dataset_config true \
--merge_lora true \"

展开
收起
小小爱吃香菜 2024-04-24 08:20:47 32 分享 版权
1 条回答
写回答
取消 提交回答
  • 为了利利

    "合并前后的推理代码不同，您看下呢。 0645c4cb6f8bb957fb6a259f55add580.png
    此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”"

    2024-04-24 12:19:28
    赞同 1 展开评论
相关问答
modelscope中使用:swift export，来合并量化模型，报错是为什么？
93
1
0
modelscope-funasr部署后模型的推理结果，识别效果会下降，有什么改善方式吗？
49
0
0
想用sdk下载modelscope模型，只下载，是不是只需要pip i ms就可以了?
51
1
0
试了好几种办法，都不能正常转出modelscope的onnx模型，怎么解决？
62
0
0
请问ModelScope的量化模型支持 export?
48
1
0
ModelScope中，读光的表格识别等无法正常导出onnx模型，怎么实现模型的导出呢？
51
1
0
图中两个ModelScope模型 c#用onnxRuntime怎么写？
38
0
0
modelscope-funasr这几个模型中有一些是只支持cpu运行的嘛?
81
0
0
ModelScope中，请问qwen/Qwen1.5-110B-Chat这个模型怎么在魔搭上部署呢？
139
1
0
怎么从网站直接下载到ModelScope模型库?
38
0
0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！欢迎加入技术交流群：微信公众号：魔搭ModelScope社区，钉钉群号：44837352

我要提问

相关文章

  • 为什么要用TorchEasyRec processor？
  • PyTorch内存优化的10种策略总结：在有限资源环境下高效训练模型
  • Kimi开源Moonlight-16B-A3B：基于Muon优化器的高效大模型，性能与训练效率双突破！
  • ModelScope魔搭25年2月版本发布月报
  • DeepSeek开源Janus-Pro多模态理解生成模型，魔搭社区推理、微调最佳实践

    • 热门讨论

    热门文章

  • ModelScope中，模型下载默认路径在哪个路径？
  • ModelScope下载速度慢怎么解决？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • ModelScope qwen7b、14b、72b lora微调分别需要的显存和cpu内存是多少？
  • com/action/joingroup?code=v1是什么意思
  • ModelScope有部署qwen2-72b的么，正常推理需要多大的显存？
  • 无法导入 modelscope，已经pip install了
  • 在魔塔社区-模型服务 里面一键部署的deepseek模型怎么使用？
  • modelscope上跑报错，提示要pip install ttsfrd，搞不定
  • ModelScope服务器太差了，下个模型断断续续的，有解决办法吗？
    • 展开全部
  • 深度评测 | 仅用3分钟，百炼调用满血版 Deepseek-r1 API，百万Token免费用，简直不要太爽。
  • WeaveFox：蚂蚁集团推出 AI 前端智能研发平台，能够根据设计图直接生成源代码，支持多种客户端和技术栈
  • 通义万相Wan2.1视频模型开源！视频生成模型新标杆，支持中文字效+高质量视频生成
  • 本地部署DeepSeek模型
  • Qwen2.5-Max：阿里通义千问超大规模 MoE 模型，使用超过20万亿tokens的预训练数据
  • KTransformers：告别天价显卡！国产框架让单卡24G显存跑DeepSeek-R1 671B大模型：推理速度飙升28倍
  • 阿里云PAI部署DeepSeek及调用
  • MNN-LLM App：在手机上离线运行大模型，阿里巴巴开源基于 MNN-LLM 框架开发的手机 AI 助手应用
  • 手把手教你使用 Ollama 和 LobeChat 快速本地部署 DeepSeek R1 模型，创建个性化 AI 助手
  • AnythingLLM：34K Star！一键上传文件轻松打造个人知识库，构建只属于你的AI助手，附详细部署教程
    • 展开全部
    还有其他疑问?
    咨询AI助理