开发者社区 > ModelScope模型即服务 > 正文

modelscope终端再执行下面的打印代码,需要重启怎么处理?

"from swift.llm import DatasetName, ModelType, SftArguments, sft_main
import os

os.environ['CUDA_VISIBLE_DEVICES'] = '0'

sft_args = SftArguments(
model_type=ModelType.qwen1half_7b_chat,
dataset=[DatasetName.ms_bench_mini],
train_dataset_sample=1000,
logging_steps=5,
max_length=2048,
learning_rate=5e-5,
warmup_ratio=0.4,
output_dir='output',
lora_target_modules=['ALL'],
self_cognition_sample=500,
model_name=['小黄', 'Xiao Huang'],
model_author=['魔搭', 'ModelScope'])
output = sft_main(sft_args)
best_model_checkpoint = output['best_model_checkpoint']
print(f'best_model_checkpoint: {best_model_checkpoint}')

魔搭免费A10 24G 微调qwen1half_7b_chat 执行完上面的代码,终端再执行下面的打印代码,Notebook 量化的时候就503代码错误了,

Notebook就 503 需要重启

print(f'''CUDA_VISIBLE_DEVICES=0 swift export \
--ckpt_dir {best_model_checkpoint} \
--quant_bits 4 --quant_method awq \
--merge_lora true''') modelscope终端再执行下面的打印代码,Notebook 量化的时候就503代码错误了,需要重启怎么处理?"

展开
收起
Lucidly 2024-04-16 21:24:35 19 0
0 条回答
写回答
取消 提交回答

ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!

热门讨论

热门文章

相关电子书

更多
视觉AI能力的开放现状及ModelScope实战 立即下载
ModelScope助力语音AI模型创新与应用 立即下载
低代码开发师(初级)实战教程 立即下载