AI 助理
备案控制台
开发者社区 ModelScope模型即服务 自然语言处理 正文

modelscope-funasr中punc_model 推理怎么这么慢呢？

modelscope-funasr中punc_model 推理怎么这么慢呢 20s左右，所有版本都是最新的？image.png
punc_ct-transformer_cn-en-common-vocab471067-large
v2.0.4

展开
收起
真的很搞笑 2024-02-08 11:41:11 146 分享 版权
1 条回答
写回答
取消 提交回答
  • 芯在这

    推理多个取平均 ，此回答整理自钉群“modelscope-funasr社区交流”

    2024-02-08 12:22:26
    赞同 展开评论
相关问答
ModelScope推理时，--max_new_tokens和--max_length有什么区别？
453
1
0
modelscope的自然语言推理或通用信息提取能做到下文理解吗？
62
1
0
在modelscope-funasr同样的数据类型 ，提升的是推理速度吧，识别准确率也会有所提升吗？
54
0
0
modelscope-funasr的GPU推理的cpp版本内存和显存不回收的问题怎么解决？
117
0
0
modelscope-funasr这个推理cpu的情况下还能加速吗？
145
0
0
ModelScope未量化模型推理很快，双卡推理也很快，只有4卡非常慢，怎么解决？
96
0
0
modelscope-funasr的demo中直接推理和funasr推理有什么区别吗？
106
1
0
两个线程，一个线程推理模型a，另一个线程同时推理modelscope模型b，为啥回报错 ？
80
1
0
modelscope中，为什么说在llm推理的prefill阶段？
89
0
0
modelscope-funasr内网环境模型文件路径有模型，推理任务怎么还去下载模型？
110
1
0
ModelScope模型即服务

自然语言处理

包含命名实体识别、文本分类、分词、关系抽取、问答、推理、文本摘要、情感分析、机器翻译等多个领域

我要提问

相关文章

  • Java 大视界 -- Java 大数据机器学习模型在自然语言处理中的对抗训练与鲁棒性提升（205）
  • “日志别再只会翻了，教它自己说话”——聊聊用 NLP 玩转日志分析
  • 《10分钟开发电商页！CodeBuddy自然语言转代码实测：程序员效率革命》
  • Java 大视界 -- Java 大数据机器学习模型在自然语言生成中的可控性研究与应用（229）
  • 从“写SQL”到“聊数据”：NL2SQL如何用自然语言解锁数据库？

    • 热门讨论

    热门文章

  • modelscope-funasr这是服务端关闭了连接吗？
  • modelscope-funasr有说话人分离功能吗？
  • 本地运行示例报错No module named 'deepspeed'
  • modelscope-funasr实时设别，mode:2pass 还是online，2个有啥不一样？
  • modelscope-funasr有没有开源的语音唤醒，自定义唤醒？
  • modelscope-funasr 热词如何设置？
  • modelscope-funasr中命令行用法 如何生成带时间戳的结果？
  • modelscope-funasr基于paraformer微调了粤语试了下，效果不太理想。怎么调整？
  • modelscope-funasr的 hotwords 是什么意思？
  • modelscope-funasr的sensevoice还不支持热词，是吗？
    • 展开全部
  • 智胜未来：国内大模型+Agent应用案例精选，以及主流Agent框架开源项目推荐
  • FastAPI开发者福音！FastAPI-MCP：将FastAPI秒变MCP服务器的开源神器，无需配置自动转换！
  • Qlib：华尔街颤抖！微软开源金融AI量化投资神器，助力智能投研
  • 告别Hugging Face模型下载难题：掌握高效下载策略，畅享无缝开发体验
  • 自然语言生成代码一键搞定！Codex CLI：OpenAI开源终端AI编程助手，代码重构+测试全自动
  • FireCrawl：开源 AI 网络爬虫工具，自动爬取网站及子页面内容，预处理为结构化数据
  • Cline：29.7K Star！一文详解VSCode最强开源AI编程搭子：一键生成代码+自动跑终端+操控浏览器...
  • KAG：增强 LLM 的专业能力！蚂蚁集团推出专业领域知识增强框架，支持逻辑推理和多跳问答
  • Memobase：开源AI长期记忆系统，让AI真正记住每个用户的秘密武器
  • ComfyUI-Copilot：阿里把AI助手塞进ComfyUI：一句话生成工作流，自动布线/调参/选模型，小白秒变大神！
    • 展开全部
    还有其他疑问?
    咨询AI助理