开发者社区 问答 正文

预训练语言模型的研究与应用被学术界和工业界视为 NLP 领域的一项重大突破,那 NLP 问题的解决方

预训练语言模型的研究与应用被学术界和工业界视为 NLP 领域的一项重大突破,那 NLP 问题的解决方式有什么变化呢?

展开
收起
小菜姬 2021-12-06 17:27:33 666 分享 版权
来自: 阿里机器智能
1 条回答
写回答
取消 提交回答
  • 将 NLP 问题的解决方式从以往的为每个任务单独设计复杂的模型逐渐演变成了预训练 + 微调的范式,让众多 NLP 应用能够享受到大语料预训练模型带来的红利,在通用的预训练模型的基础上加入简单的任务层,并结合自己场景的少量语料就可以获得一个不错的领域 NLP 模型。

    2021-12-08 18:43:31
    赞同 展开评论