modelscope-funasr微调得需要多大硬盘？
modelscope-funasr微调得需要多大硬盘，我用的notebook，没微调前剩余85G空间，微调失败原因目前是硬盘100%
展开
收起
2
条回答
写回答
写回答
-
你一边训练一边删除ckpt就好了，设置最大保留数。具体可以看下文档：examples/README.md。此回答整理自钉群“modelscope-funasr社区交流”
2024-05-09 16:21:48赞同 1 展开评论 打赏 -
某政企事业单位运维工程师，主要从事系统运维及大数据开发工作，多次获得阿里云、华为云、腾讯云征文比赛一二等奖；CTF选手，白帽，全国交通行业网络安全大赛二等奖，全国数信杯数据安全大赛银奖，手握多张EDU、CNVD、CNNVD证书微调过程可能需要较大的硬盘空间，特别是当模型尺寸大、数据集体积也大时。您当前的Notebook仅剩85GB空间，并且微调过程中硬盘已满至100%，这表明微调过程中所需的临时文件、检查点保存、日志记录等消耗了大量空间。
考虑到微调失败是由于硬盘空间不足，建议至少保证有150GB以上的额外空间用于微调过程，这样能更稳妥地应对模型、数据及中间文件的存储需求。
2024-05-09 09:20:56赞同 1 展开评论 打赏
相关问答
热门讨论
热门文章
modelscope-funasr的FunClip怎么安装的？
1577
小白求助，跟着大模型微调教程做不太明白
504
如何下载llama模型到本地？
2758
练的pth模型文件，怎么转成bin文件？
839
请问微调开元模型qwe1.5b 和 7b 分别支持数据集的上下文长度是多少个汉字/token？
1099
modelscope-funasr有没有开源的语音唤醒，自定义唤醒？
368
modelscope-funasr在安卓平台可以集成sense voice吗？
107
modelscope-funasr实时ASR的微调该怎么操作？
484
modelscope-funasr热词怎么设置才有效？
391
gpt3,加载数据时，MsDataset.load报错
1126
展开全部
智胜未来：国内大模型+Agent应用案例精选，以及主流Agent框架开源项目推荐
1248
2024年6月118篇代码大模型论文最全整理
646
【AI 技术分享】大模型与数据检索的探索实践
146
RAG+AI工作流+Agent：LLM框架该如何选择，全面对比MaxKB、Dify、FastGPT、RagFlow、Anything-LLM,以及更多推荐
584
LLM 大模型学习必知必会系列(二)：提示词工程-Prompt Engineering 以及实战闯关
887
告别Hugging Face模型下载难题：掌握高效下载策略，畅享无缝开发体验
313
前端大模型应用笔记（二）：最新llama3.2小参数版本1B的古董机测试 - 支持128K上下文，表现优异，和移动端更配
56
基于LangChain-Chatchat实现的本地知识库的问答应用-快速上手（检索增强生成(RAG)大模型）
848
ModelScope X 昇腾910快速上手
510
LLM 大模型学习必知必会系列(一)：大模型基础知识篇
1285
展开全部
