modelscope-funasr onnx这个软件包我按文档部署了,但也没法同时支持热词和时间戳呀?
对于FunASR onnx模型,它已经增加了对热词模型与时间戳模型的支持。在进行ONNX导出时,模型分为两部分,获取热词编码的Hotword和进行语音识别的主模型。因此,你应该能在2.0版本中使用自定义热词进行定制化,以及获取输出文本token级别的时间戳。此外,为了提高Paraformer的性能,它还增加了时间戳预测和热词定制能力。
如果你在使用过程中遇到问题,可以检查你的配置是否正确。例如,你需要正确地设置pipeline任务,指定模型仓库中的模型名称或本地磁盘中的模型路径。同时,确保你的环境支持CPU或GPU推理。
modelscope-funasr
是一个基于FunASR
的语音识别工具,它支持多种模型格式,包括ONNX。关于热词和时间戳的支持,您需要确保您的输入数据包含这些信息,并在推理过程中正确处理它们。
在处理热词时,您可以将热词添加到文本中,或者使用特殊的标记来表示热词。例如,您可以使用<hotword>
来表示热词。在推理过程中,您可以根据需要提取或忽略这些标记。
对于时间戳,您可以将其作为额外的输入特征传递给模型。在推理过程中,您需要确保时间戳与音频数据对齐,并根据需要进行相应的处理。
ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352