机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中我怎么把模型文件保存在数据集里呢?还是在SDW实例关闭时,会自动保存已有文件?不需要,/mnt/workspace下所有的文件都会写入nas,相当于一个外挂的硬盘。不会随着实例启动停止被回收。
【回答】
你可以按照以下步骤进行保存操作:
1、在PAI-DSW中,进入您你工作环境,打开终端。
2、切换到您的数据集目录,例如:
cd /mnt/data/mnist
将3、模型文件拷贝到当前目录下,例如:
cp /mnt/workspace/model.pt .
4、确认模型文件已经成功保存在数据集中。
敲黑板: 在PAI-DSW实例关闭时,你保存在数据集中的文件会自动保存。 但是,为了保证数据的安全性,建议你在实验完成后手动将数据集中的文件备份到其他存储设备中。 同时, 你也可以通过阿里云NAS服务将数据集中的文件备份到云盘中,以防止数据丢失。
在阿里云机器学习PAI、PAI-Designer、PAI-DSW和PAI-EAS中,你可以通过将模型文件保存在数据集中来实现长期保存和共享模型数据的目的。
具体来说,你可以在PAI的数据集中上传模型文件,并在训练作业或预测作业中使用该数据集。在训练或预测过程中,可以将模型保存在数据集指定的路径下,以便进行后续使用和部署。
在PAI-DSW(Data Science Workshop)中,/mnt/workspace下所有的文件都会自动写入到NAS(Network Attached Storage)中,因此你无需手动将模型保存到数据集中。这些文件会被自动保存并持久化,即使SDW实例关闭时也不会丢失。但是,为了保证数据的安全性和易于管理,建议还是将模型文件保存在数据集中以备份和共享。
在使用阿里云机器学习PAI等产品时,建议遵循最佳实践和安全规范,保护好你的敏感数据和模型文件,以保证业务安全性和稳定性。
把文件放到/mnt/workspace 路径下,jupyter的默认工作路径就是。这个是基于开发的工作环境,要了解一下文件路径的关系。一般生成的文件都在/mnt//workspace 路径下。另外 dsw 需要对linux 命令有基础的了解。如果您不太熟悉的话,了解下 pai-eas 部署 sd 的帮助文档 https://help.aliyun.com/document_detail/2261222.html,此回答整理自钉群“机器学习PAI交流群(答疑@值班)
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。