modelscope-funasr微调得需要多大硬盘？
modelscope-funasr微调得需要多大硬盘，我用的notebook，没微调前剩余85G空间，微调失败原因目前是硬盘100%
展开
收起
2
条回答
写回答
写回答
-
你一边训练一边删除ckpt就好了，设置最大保留数。具体可以看下文档：examples/README.md。此回答整理自钉群“modelscope-funasr社区交流”
2024-05-09 16:21:48赞同 1 展开评论 打赏 -
某政企事业单位运维工程师，主要从事系统运维工作，同时兼顾教育行业、企业等src安全漏洞挖掘，曾获全国行业网络安全大赛二等奖。微调过程可能需要较大的硬盘空间，特别是当模型尺寸大、数据集体积也大时。您当前的Notebook仅剩85GB空间，并且微调过程中硬盘已满至100%，这表明微调过程中所需的临时文件、检查点保存、日志记录等消耗了大量空间。
考虑到微调失败是由于硬盘空间不足，建议至少保证有150GB以上的额外空间用于微调过程，这样能更稳妥地应对模型、数据及中间文件的存储需求。
2024-05-09 09:20:56赞同 1 展开评论 打赏
相关问答
热门讨论
热门文章
请问微调开元模型qwe1.5b 和 7b 分别支持数据集的上下文长度是多少个汉字/token？
441
如何提高qwen-7b-chat-int4的并行处理能力
968
modelscope-funasr的byte[] 8k 转16k 有什么好的方式吗？java？
30
如何下载llama模型到本地？
2006
练的pth模型文件，怎么转成bin文件？
217
modelscope-funasr这个问题怎么解决？
25
modelscope-funasr离线中文语音识别C++版本，有对音频的长度做限制吗？
36
在modelscope-funasr如果是从web端使用麦克风录入，能实现吗？
24
modelscope-funasrbash的finetune.sh命令下载训练模型显示错误，怎么办？
24
modelscope-funasr这三种模型使用效果感觉一样，有什么差别吗？
23
展开全部
LLM 大模型学习必知必会系列(一)：大模型基础知识篇
177
LLM 大模型学习必知必会系列(二)：提示词工程-Prompt Engineering 以及实战闯关
144
基于LangChain-Chatchat实现的本地知识库的问答应用-快速上手（检索增强生成(RAG)大模型）
180
检索增强生成(RAG)实践：基于LlamaIndex和Qwen1.5搭建智能问答系统
168
RAG：AI大模型联合向量数据库和 Llama-index，助力检索增强生成技术
105
ModelScope X 昇腾910快速上手
193
DashVector&千问7B模型，打造极简RAG 之 基于专属知识的问答服务实践
236
高通量基因测序在药物研发和靶向治疗中的应用（一）
743
AI智能写作工具
734
中文大模型评测
760
展开全部
