备案控制台

开发者社区

开发者社区 > ModelScope模型即服务 > 正文

modelscope-funasr C++ ASR加载模型有加速的方法吗？

modelscope-funasr C++ ASR加载模型有加速的方法吗？我们在RK3588上加载量化后large版ASR模型时间过长（需要大约30秒），谢谢！

展开

收起

-Feng、冯冯 2023-12-20 08:22:32 57 0

1 条回答

写回答

取消提交回答

@番茄酱脑袋、

一般模型部署，处理加载到内存，还需要预热，我们代码里面直接集成了预热功能。此回答整理自钉群“modelscope-funasr社区交流”

2023-12-20 09:22:51

赞同展开评论打赏

相关问答

请问ModelScope中,notebook有什么方法可以开启端口被远程调用吗？

9

1

0

ModelScope中,创空间现在不能api调用,有什么替代的方法？

7

0

0

请问ModelScope的大模型如何推理控制长度和 history?

8

1

0

请问ModelScope有正式版本的模型吗？

5

1

0

请问加载ModelScope平台上自己创建的数据集，报以上错误，要怎么解决?

4

1

0

ModelScope的数据集的下载方法是什么?

3

1

0

Modelscope的ftd模型，在export之前是正常的，export之后回答就边了呢？

17

1

0

Modelscope中，seqGPT微调模型如何在python环境加载使用?

7

1

0

modelscope 有没有c++ 的api？

11

0

0

modelscope文章中提到的微调后的模型，可以分享出来吗？

8

0

0

ModelScope模型即服务

ModelScope旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品，让模型应用更简单！

我要提问

热门讨论

热门文章

com/action/joingroup?code=v1是什么意思

ModelScope中，模型下载默认路径在哪个路径？

请问ModelScope中，怎么修改本地运行，模型自动下载到 c 盘下？

ModelScope的Qwen1.5-14B-Chat需要多少大显存？

ModelScope qwen7b、14b、72b lora微调分别需要的显存和cpu内存是多少？

如何训练属于自己的“通义千问”呢？

ModelScope中，请问Qwen-14B-Chat-Int4运行最少需要多少内存？

我希望通过damo-YOLO训练1500*1500的图片

streamlit 生成链接无法访问，gradio只生成内网，无法生成公网

从魔塔领取gpu免费资源无法连接huggingface.co

展开全部

手把手教你捏一个自己的Agent

阿里云通义千问向全社会开放！

Llama 3开源！魔搭社区手把手带你推理，部署，微调和评估

Phi-3：小模型，大未来！（附魔搭社区推理、微调实战教程）

千亿大模型来了！通义千问110B模型开源，魔搭社区推理、微调最佳实践

ChatGPT中文版杀疯了,已登录AI模型市场

通义千问72B、1.8B、Audio模型开源！魔搭社区最佳实践来啦！

Llama3 中文通用Agent微调模型来啦！（附手把手微调实战教程）

Qwen1.5开源！魔搭最佳实践来啦！

社区供稿 | Llama3-8B中文版！OpenBuddy发布新一代开源中文跨语言模型

展开全部

相关课程

更多

个性化语音合成模型微调

40

1

去学习

ModelScope社区Library技术架构介绍

174

1

去学习

C++ 入门教程开发文档

17490

42

去学习

相关电子书

更多

使用C++11开发PHP7扩展 立即下载

GPON Class C++ SFP O;T Transce 立即下载

GPON Class C++ SFP OLT Transce 立即下载