开发者社区 问答 正文

怎么使用联合训练bert textcnn loss 相加来构建bert模型蒸馏至textcnn模型?

怎么使用联合训练 bert textcnn loss 相加来构建bert模型蒸馏至textcnn模型?

展开
收起
Dons 2021-12-03 22:31:27 664 分享 版权
来自: 阿里机器智能
1 条回答
写回答
取消 提交回答
  • teacher 和student 同时训练,使用mutil-task的方式

    image.jpeg

    2021-12-03 22:32:43
    赞同 展开评论