开发者社区 > ModelScope模型即服务 > 正文

ModelScope中,V100的gpu是不是要改成fp16去调呢?

"ModelScope中,V100的gpu是不是要改成fp16去调呢? 422d2aa75355f6d30db40b9d7afa82d2.png
"

展开
收起
小小爱吃香菜 2024-03-17 12:33:05 87 0
1 条回答
写回答
取消 提交回答
  • 十分耕耘,一定会有一分收获!

    楼主你好,看了你的问题,据我所知在阿里云ModelScope中使用V100 GPU时,并不需要将模型参数改为fp16来进行调优,V100 GPU有16GB或32GB的显存,支持较大的模型和批处理大小,并且能够处理高精度的浮点计算。你可以在V100 GPU上使用fp32(标准的32位浮点数)进行模型训练和推理,而无需进行精度降低(如fp16)。

    2024-03-17 18:05:26
    赞同 2 展开评论 打赏

ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352

相关电子书

更多
DeepStream: GPU加速海量视频数据智能处理 立即下载
阿里巴巴高性能GPU架构与应用 立即下载
GPU在超大规模深度学习中的发展和应用 立即下载