开发者社区 问答 正文

联合文本和音素预训练的表征学习方法是如何提升口语语言理解任务对ASR错误的鲁棒性的?

联合文本和音素预训练的表征学习方法是如何提升口语语言理解任务对ASR错误的鲁棒性的?

展开
收起
萝卜丝丸子 2024-08-19 21:25:25 42 分享 版权
1 条回答
写回答
取消 提交回答
  • 联合文本和音素预训练的表征学习方法通过利用音素信息,设计基于条件掩码语言模型目标和句间关系目标的预训练方法,并在finetune阶段融合发音特征,从而提升口语语言理解任务对ASR错误的鲁棒性。实验结果表明,该方法可以显著提升基线模型效果以及口语语言理解任务对ASR错误的鲁棒性。image.png

    2024-08-19 22:33:38
    赞同 3 展开评论
问答分类:
问答地址: