AI 助理
备案控制台登录注册
开发者社区 ModelScope模型即服务 计算机视觉 正文

在ModelScope swift开源项目 里面有个infer的文件，代码里有加载lora推理的逻辑

在ModelScope中，swift开源项目，里面有个infer的文件，代码里有加载lora推理的逻辑怎么办？https://github.com/modelscope/swift/blob/main/examples/pytorch/llm/src/llm_infer.py

展开
收起
LLLA 2023-09-19 21:24:26 99 发布于天津 分享
分享
 版权
举报
1 条回答
写回答
取消 提交回答
  • AAAOY

    是用full训练的话，直接使用这个。
    image.png。此回答来自“魔搭ModelScope开发者联盟群 ①”

    2023-09-19 22:54:44 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
相关问答
ModelScope如何用英特尔显卡进行推理，目前pytorch已经支持，求大神帮帮忙。
41
1
0
modelscope-funasr这个中文模型在使用过程中推理结果会识别出现英文，为什么？
54
1
0
ModelScope中示例页面的GPU版本和CPU版本。这两个不同版本会影响推理效率吗？
93
1
0
在modelscope-funasr中推理的输出结果准确率要比直接推理的低，是参数有问题吗？
55
1
0
ModelScope中，使用SWIFT的进行sft报错， 这是要升级驱动？
92
1
0
modelscope的swift昨天部署还是正常运行的，今天重启电脑后就一直报错如下错误，怎么解决？
35
1
0
用swift推理训练后的ModelScope模型，参数里model stype是不是就不需要？
65
1
0
在A10 24G显存下执行下面微调demo，会内存溢出，是什么原因？
49
1
0
ModelScope中，swift模型库怎么更新？
51
1
0
modelscope中使用:swift export，来合并量化模型，报错是为什么？
98
1
0
ModelScope模型即服务

计算机视觉

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

我要提问

相关文章

  • 点晴PMS：港口码头管理的智能引擎，驱动效率革命
  • CogView4：智谱开源中文文生图新标杆，中文海报+任意分辨率一键生成
  • MiniMind：2小时训练出你的专属AI！开源轻量级语言模型，个人GPU轻松搞定
  • ART：匿名区域布局+多层透明图像生成技术，生成速度比全注意力方法快12倍以上
  • NotaGen：中央音乐学院联合清华推出AI音乐生成模型，古典乐谱一键生成，音乐性接近人类！

    • 热门讨论

    热门文章

  • ModelScope中，模型下载默认路径在哪个路径？
  • 我希望通过damo-YOLO训练1500*1500的图片
  • ModelScope下载速度慢怎么解决？
  • com/action/joingroup?code=v1是什么意思
  • ModelScope有没有人知道windows安装ttsfrd的方法或者ttsfrd源码？
  • modelscope cache 环境变量是啥？
  • 我想使用 Modelscope 自己下载下来的本地模型，不知道怎么操作？
  • 如何下载modelscope模型？
  • ModelScope中我尝试使用这个模型搭建了一个推理服务，然后报错了怎么办？
  • ModelScope中，本地部署魔搭镜像，怎么下载？有点看不懂
    • 展开全部
  • EchoMimicV2：阿里推出的开源数字人项目，能生成完整数字人半身动画
  • Qwen2.5-VL：阿里通义千问最新开源视觉语言模型，能够理解超过1小时的长视频
  • Step-Video-T2V：碾压Sora？国产开源巨兽Step-Video-T2V杀到：300亿参数一键生成204帧视频
  • VidSketch：手残党逆袭！浙大AI神器草图秒变4K动画，三连提示词玩转影视级特效
  • UI-TARS：字节跳动开源专注于多平台 GUI 自动化交互的视觉语言模型
  • VISION XL：支持四倍超分辨率的 AI 视频修复处理工具，提供去除模糊、修复缺失等功能
  • video-analyzer：开源视频分析工具，支持提取视频关键帧、音频转录，自动生成视频详细描述
  • STAR：南京大学联合字节开源视频超分辨率增强生成框架，视频清晰度一键提升，支持从低分辨率视频生成高分辨率视频
  • AnchorCrafter：中科院联合腾讯推出的AI虚拟主播带货视频制作技术
  • X-AnyLabeling：开源的 AI 图像标注工具，支持多种标注样式，适于目标检测、图像分割等不同场景
    • 展开全部
    还有其他疑问?
    咨询AI助理
    AI助理

    你好，我是AI助理

    可以解答问题、推荐解决方案等