开发者社区> 问答> 正文

MetaKD算法在MNLI的5个领域数据集的跨任务蒸馏效果如何?

MetaKD算法在MNLI的5个领域数据集的跨任务蒸馏效果如何?

展开
收起
花开富贵111 2024-08-19 10:44:22 27 0
1 条回答
写回答
取消 提交回答
  • MetaKD算法在MNLI的5个领域数据集的跨任务蒸馏效果显示,蒸馏出的BERT-Small模型和原始BERT模型相比,在保持模型精度值平均只下降1.5%的前提下参数减少了87%,大大减少了部署的压力。image.png
    image.png

    2024-08-19 15:51:59
    赞同 1 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
数据+算法定义新世界 立即下载
袋鼠云基于实时计算的反黄牛算法 立即下载
Alink:基于Apache Flink的算法平台 立即下载