在 2019 年,各个研究机构和公司在 BERT 的基础上进一步创新,分别提出了什么预训练模型?
如:Facebook 发布的 RoBERTa,CMU 发布的 XLNet,Stanford 发布的 ELECTRA,还有百度的 ERNIE 模型,阿里的 structBERT 模型, 华为的 NEZHA,哈工大和科大讯飞也都提出了自己的模型,不断刷新 NLP 任务的最好成绩。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。