AI 助理
备案控制台
开发者社区 ModelScope模型即服务 计算机视觉 正文

ModelScope这个在搞了没？把他迁移到trt-llm吧？

ModelScope这个在搞了没？把他迁移到trt-llm吧？9195193f169a7378fa4fe9904e10a6ab.png

展开
收起
真的很搞笑 2023-11-15 07:24:44 60 分享 版权
1 条回答
写回答
取消 提交回答
  • sunrr

    ModelScope是一个基于AutoGPTQ的模型推理示例代码，如果您想获得更快的推理速度，建议将其与TensorRT-LM结合使用。

    2023-11-30 10:43:23
    赞同 展开评论
相关问答
ModelScope模型可以迁移到昇腾平台上吗？
158
1
0
ModelScope中， llm生成的图谱如何修改和测试呢？
78
0
0
modelscope-funasr目前支持直接把一个歌手的声音迁移到另一段歌声上吗？
75
1
0
modelscope-funasr的LLM智能裁剪与LLM推理的文本内容不一致这种怎么解决？
125
1
0
ModelScope图片的风格迁移，现在有哪些成熟的模型吗？
91
1
0
ModelScope中，迁移到业务的更大的模型上，有没有别的解决方案，最好还是升级python版本?
102
1
0
ModelScope中，对于部署llm，在需要使用多张gpu时，是不是推荐使用偶数张gpu？
153
1
0
modelscope中关于用swift对LLM量化时，参数的含义咨询
184
1
0
modelscope中，为什么说在llm推理的prefill阶段？
93
0
0
ModelScope llm微调用python的时候，怎么使用自己的数据集？
87
0
0
ModelScope模型即服务

计算机视觉

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

我要提问

相关文章

  • OBS美颜美肌插件安装使用教程
  • AI Ping：精准可靠的大模型服务性能评测平台
  • Python图片上采样工具 - RealESRGANer
  • pytorch基于AnimeFace128数据集训练DCGAN
  • 【发票转表格明细】PDF发票提取到表，图片发票提取到表格，扫描件发票提取到表格，全电发票PDF，全电发票扫描件识别导出EXCEL表格数电发票

    • 热门讨论

    热门文章

  • 我希望通过damo-YOLO训练1500*1500的图片
  • ModelScope下载速度慢怎么解决？
  • cpu部署报错 Torch not compiled with CUDA enabled
  • ModelScope中，模型下载默认路径在哪个路径？
  • 如何下载modelscope模型？
  • com/action/joingroup?code=v1是什么意思
  • 在ModelScope中，下载模型时的ssl问题怎么解决？!
  • ModelScope魔搭上的可以直接调用api用吗？
  • ModelScope B/I/E分别代表啥意思呢？
  • modelscope这个下载有点慢呀，好几次都超时了，怎么解决？
    • 展开全部
  • LHM：单图生成3D动画人！阿里开源建模核弹，高斯点云重构服装纹理
  • Qwen2.5-VL：阿里通义千问最新开源视觉语言模型，能够理解超过1小时的长视频
  • RF-DETR：YOLO霸主地位不保？开源 SOTA 实时目标检测模型，比眨眼还快3倍！
  • Cobalt：开源的流媒体下载工具，支持解析和下载全平台的视频、音频和图片，支持多种视频质量和格式，自动提取视频字幕
  • InvSR：开源图像超分辨率生成模型，提升分辨率，修复老旧照片为超清图像
  • STAR：南京大学联合字节开源视频超分辨率增强生成框架，视频清晰度一键提升，支持从低分辨率视频生成高分辨率视频
  • video-analyzer：开源视频分析工具，支持提取视频关键帧、音频转录，自动生成视频详细描述
  • X-AnyLabeling：开源的 AI 图像标注工具，支持多种标注样式，适于目标检测、图像分割等不同场景
  • EchoMimicV2：阿里推出的开源数字人项目，能生成完整数字人半身动画
  • OOTDiffusion：开源AI虚拟试衣工具，智能适配性别和体型自动调整衣物
    • 展开全部
    还有其他疑问?
    咨询AI助理