开发者社区> 问答> 正文

在T5模型上,EPL通过哪些显存优化技术的组合使用,实现了显存的极致优化?

在T5模型上,EPL通过哪些显存优化技术的组合使用,实现了显存的极致优化?

展开
收起
萝卜丝丸子 2024-08-05 21:46:54 22 0
1 条回答
写回答
取消 提交回答
  • 在T5模型上,EPL通过开启GC(Gradient Checkpoint)、ZeRO和显存优化的AMP技术的组合使用,实现了显存的极致优化。在性能保持不变的情况下,显存降低了2.6倍。

    2024-08-05 22:09:01
    赞同 6 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载