modelscope中,如何修改segdictfile文件和config.yaml中的tokenlist呀?
在ModelScope中,要修改segdictfile文件和config.yaml中的tokenlist,可以按照以下步骤操作:
首先,找到segdictfile文件和config.yaml文件所在的目录。
打开segdictfile文件,使用文本编辑器(如Notepad++、Sublime Text等)进行编辑。在文件中添加或修改需要的内容,然后保存文件。
打开config.yaml文件,同样使用文本编辑器进行编辑。找到tokenlist相关的配置项,修改其值。例如,如果需要修改tokenlist为新的列表,可以将原来的内容替换为新的列表。保存文件。
重新运行程序,查看修改后的效果。如果程序能够正确识别新的tokenlist,说明修改成功。
在ModelScope-Funasr中,若要修改或自定义tokenlist(词汇表),通常需要根据自己的数据集重新构建tokenizer,并对模型进行相应调整
ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352