开发者社区> 问答> 正文

NVIDIA是如何利用FP8计算技术优化AI训练的?

NVIDIA是如何利用FP8计算技术优化AI训练的?

展开
收起
夹心789 2024-06-25 22:35:06 57 0
1 条回答
写回答
取消 提交回答
  • NVIDIA利用最新的FP8张量核心技术,在Hopper架构的GPU上实现了更快的低精度AI训练方法。Megatron Core通过集成Transformer Engine API,使得FP8计算能够“开箱即用”,从而以更低的成本与能耗实现更快的推理计算。

    2024-06-26 09:56:08
    赞同 2 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
2023云栖大会:PolarDB for AI 立即下载
2023云栖大会:Lindorm一站式AI数据平台实战 立即下载
释放算力潜能加速应用构建Serverless为AI创新提速 立即下载