请问ModelScope中有没有啥方法能加快微调速度呢?

"用V100 32G的卡,微调qwen1half-0_5b-chat,数据集用的DAMO_NLP/lcsts_test_set,查看显存占用2G,训练需要10h+,请问ModelScope中有没有啥方法能加快微调速度呢?提交的脚本 b13c431379d664fb62b052dcd15b443f.png
"

展开
收起
小小爱吃香菜 2024-07-09 08:25:25 58 分享 版权
1 条回答
写回答
取消 提交回答
  • batch size大一些呢。此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”

    2024-07-09 21:53:42
    赞同 1 展开评论

ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352

还有其他疑问?
咨询AI助理