【DSW Gallery】一文览尽:机器学习平台PAI模型构建和训练案例全集

本文涉及的产品
交互式建模 PAI-DSW,5000CU*H 3个月
模型训练 PAI-DLC,5000CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: 本文为您展示DSW Gallery的全部文章,欢迎您浏览。同时文末有动手实验有奖活动,期待您的参与!

一、DSW Gallery 简介

Gallery是使用机器学习平台PAI的有效指引,您可以通过Notebook的形式,直接使用机器学习平台PAI的各个组件,包括云原生深度学习训练平台PAI-DLC,弹性推理服务平台PAI-EAS,助您快速熟悉云原生下的AI研发流程。DSW Gallery为广大AI开发者提供来自各个行业和技术方向,简单易用,一键启动的案例,助您有效提升开发效率和质量。  


通过DSW Gallery,您可以预览案例,也可以在DSW实例中快速启动案例,或将案例修改为适合自己的使用场景。丰富的案例和解决方案可提升研发的效率和质量,帮助您快速完成模型构建和训练。  


本文为您展示DSW Gallery的全部文章,欢迎您浏览。同时文末有动手实验有奖活动,期待您的参与!


二、DSW Gallery 目录


标题 链接
【DSW Gallery】PAI-DSW快速入门 https://developer.aliyun.com/article/1012661
【DSW Gallery】PAI-DSW开通及授权 https://developer.aliyun.com/article/1012714
【DSW Gallery】在DSW中如何玩转Hugging Face https://developer.aliyun.com/article/1021445
【DSW Gallery】数据分析经典案例:Kaggle竞赛之房价预测 https://developer.aliyun.com/article/1023504
【DSW Gallery】基于残差网络的图像分类示例 https://developer.aliyun.com/article/1023521
【DSW Gallery】DSW实例管理 https://developer.aliyun.com/article/1024744
【DSW Gallery】PAI-DSW计费方式介绍 https://developer.aliyun.com/article/1024749
【DSW Gallery】企业和团队如何使用PAI-DSW协作开发 https://developer.aliyun.com/article/1024752
【DSW Gallery】特征平台 https://developer.aliyun.com/article/1024773
【DSW Gallery】COMMON_IO使用指南 https://developer.aliyun.com/article/1024779
【DSW Gallery】PAIIO使用指南 https://developer.aliyun.com/article/1024786
【DSW Gallery】MaxCompute(ODPS)Python SDK使用指南 https://developer.aliyun.com/article/1025441
【DSW Gallery】阿里云OSS使用指南 https://developer.aliyun.com/article/1025445
【DSW Gallery】使用Numpy实现卷积神经网络 https://developer.aliyun.com/article/1025456
【DSW Gallery】SkLearn CookBook https://developer.aliyun.com/article/1025489
【DSW Gallery】 XGBoost:如何使用XGBoost解决回归问题 https://developer.aliyun.com/article/1026554
【DSW Gallery】基于SwinTransformer的图像分类示例 https://developer.aliyun.com/article/1026560
【DSW Gallery】基于YOLOX模型图像检测示例 https://developer.aliyun.com/article/1026565
【DSW Gallery】基于EasyNLP的BERT文本分类 https://developer.aliyun.com/article/1026569
【DSW Gallery】基于EasyNLP的BERT英文机器阅读理解 https://developer.aliyun.com/article/1027847

【DSW Gallery】基于EasyNLP的MacBERT中文机器阅读理解

https://developer.aliyun.com/article/1027880
【DSW Gallery】基于EasyNLP的RoBERTa中文新闻多分类 https://developer.aliyun.com/article/1027883
【DSW Gallery】基于EasyNLP的英文文本摘要 https://developer.aliyun.com/article/1036979
【DSW Gallery】基于EasyNLP的中文新闻标题生成 https://developer.aliyun.com/article/1036989
【DSW Gallery】基于EasyNLP的序列标注(命名实体识别) https://developer.aliyun.com/article/1036990
【DSW Gallery】基于EasyNLP的RoBERTa中文文本匹配 https://developer.aliyun.com/article/1036996
【DSW Gallery】基于EasyNLP的多模态CLIP图文检索 https://developer.aliyun.com/article/1037002
【DSW Gallery】HybridBackend 极简教程: 在 GPU 上加速推荐模型训练 https://developer.aliyun.com/article/1038150
【DSW Gallery】Tensorflow 2构建CNN模型 https://developer.aliyun.com/article/1038153
【DSW Gallery】使用Tensorflow来构建AutoEncoder https://developer.aliyun.com/article/1038571
【DSW Gallery】介绍如何使用SDK提交DLC训练任务 https://developer.aliyun.com/article/1038574
【DSW Gallery】DSW如何挂载数据盘 https://developer.aliyun.com/article/1038600
【DSW Gallery】DSW Gallery https://developer.aliyun.com/article/1038607
【DSW Gallery】DSW镜像使用入门 https://developer.aliyun.com/article/1038609
【DSW Gallery】DSW打通用户VPC https://developer.aliyun.com/article/1039043
【DSW Gallery】使用Python SDK管理DSW实例 https://developer.aliyun.com/article/1039045
【DSW Gallery】使用EAS Python SDK完成模型部署 https://developer.aliyun.com/article/1039047
【DSW Gallery】介绍如何在DSW中使用EAS命令行工具 https://developer.aliyun.com/article/1039050
【DSW Gallery】DSW基础使用介绍 https://developer.aliyun.com/article/1039055
【DSW Gallery】Jupyter简介 https://developer.aliyun.com/article/1039057
【DSW Gallery】Jupyter魔术命令使用技巧 https://developer.aliyun.com/article/1044697
【DSW Gallery】使用 Alink 结合 TFDV 进行数据探索和验证 https://developer.aliyun.com/article/1045594
【DSW Gallery】交替最小二乘算法解决推荐相关问题 https://developer.aliyun.com/article/1046676
【DSW Gallery】Gbdt-FM模型 https://developer.aliyun.com/article/1046709
【DSW Gallery】Gbdt-LR模型 https://developer.aliyun.com/article/1046778
【DSW Gallery】基于图算法实现金融风控 https://developer.aliyun.com/article/1046814

【DSW Gallery】 基于EasyCV的Mask2Former图像分割示例

https://developer.aliyun.com/article/1078364

【DSW Gallery】介绍如何使用命令行工具提交DLC任务

https://developer.aliyun.com/article/1159795

【DSW Gallery】基于残差网络的度量学习示例

https://developer.aliyun.com/article/1159816

【DSW Gallery】如何在DLC上提交ElasticBatch任务

https://developer.aliyun.com/article/1159835

【DSW Gallery】基于EasyNLP-Diffusion模型的中文文图生成

https://developer.aliyun.com/article/1175993

【DSW Gallery】基于EasyCV的BEVFormer 3D检测示例

https://developer.aliyun.com/article/1176788

【DSW Gallery】基于YOLOX模型和iTAG标注数据的图像检测示例

https://developer.aliyun.com/article/1177003

【DSW Gallery】基于EasyCV的文字识别示例

https://developer.aliyun.com/article/1177289

【DSW Gallery】基于Top Down的关键点检测示例

https://developer.aliyun.com/article/1177299

【DSW Gallery】基于MAE的自监督学习示例

https://developer.aliyun.com/article/1177320

【DSW Gallery】基于MOCOV2的自监督学习示例

https://developer.aliyun.com/article/1178995

【DSW Gallery】基于EasyCV的STDC图像语义分割示例

https://developer.aliyun.com/article/1178996

【DSW Gallery】基于EasyCV的视频分类示例

https://developer.aliyun.com/article/1178999

【DSW Gallery】EasyCV-基于关键点的视频分类示例

https://developer.aliyun.com/article/1179006

【DSW Gallery】基于EasyNLP的中文信息抽取

https://developer.aliyun.com/article/1179204

【DSW Gallery】基于预训练模型的多场景文本生成(以新闻标题生成为例)

https://developer.aliyun.com/article/1179242

【DSW Gallery】基于CK-BERT的中文序列标注

https://developer.aliyun.com/article/1179248

【DSW Gallery】基于EasyNLP Transformer模型的中文文图生成

https://developer.aliyun.com/article/1179340

【DSW Gallery】基于ModelScope的中文GPT-3模型(1.3B)的微调训练

https://developer.aliyun.com/article/1179344

【DSW Gallery】如何在DLC中进行Pytorch DDP分布式训练任务

https://developer.aliyun.com/article/1179346

【DSW Gallery】如何使用EasyRec训练DeepFM模型

https://developer.aliyun.com/article/1179348

【DSW Gallery】如何使用DLC进行TensorFlow 1.x 分布式训练

https://developer.aliyun.com/article/1179534

【DSW Gallery】如何使用DLC进行TensorFlow 2.x 分布式训练

https://developer.aliyun.com/article/1179545

【DSW Gallery】如何提交开启AIMaster容错监控的DLC任务

https://developer.aliyun.com/article/1179553

【DSW Gallery】如何在DLC训练任务中挂载OSS

https://developer.aliyun.com/article/1179558

【DSW Gallery】如何在DSW/DLC中使用企业版镜像服务ACR

https://developer.aliyun.com/article/1179560

【DSW Gallery】IsolationForest算法解决异常检测问题

https://developer.aliyun.com/article/1179562

【DSW Gallery】OneClassSVM 算法解决异常检测问题

https://developer.aliyun.com/article/1179565

【DSW Gallery】Grounded-SAM 马赛克熊使用示例

https://developer.aliyun.com/article/1215205


三、动手实验有奖

1.  实验内容:标题党制造机

通过【DSW Gallery】基于EasyNLP的中文新闻标题生成的操作,使用机器学习平台PAI和EasyNLP,简单、快速生成吸引眼球的高质量标题。


2.  活动日期

2022年11月11日-2022年12月30日。


3.  实验要求

1)完成上述案例的操作,截图PAI-DSW中最终跑通结果。

2)分享DSW-Gallery使用心得。例如:DSW-Gallery给你带来的主要价值是什么呢?在什么业务场景会接触和使用到DSW-Gallery?您使用DSW-Gallery解决过什么问题呢?……

3)将步骤1中的截图和步骤2的心得,以文章的形式发布在开发者社区,文章请以“DSW-Gallery使用体验+……”为标题,并将文章链接复制并发布至本文评论区。


完成上述步骤视为参与成功,缺少任一步骤视作弃权。所有参与活动的内容必须是原创作品,且保证内容的真实性,要求为个人独立创作。最终解释权归阿里云所有。


4.  参与方式

将撰写的文章以“DSW-Gallery使用体验+……”为标题,发布到开发者社区,标题不符合要求则视作无效文章,不计入统计。

步骤一:将文章发布到开发者社区。(请注意标题格式)

1654067680587-5d17dae4-942c-46b1-a47a-33a3292dd3a5.png

步骤二:将文章链接复制并发布至本文评论区。


完成步骤一和步骤二视为参与成功。(缺少任一步骤视作弃权


5.奖励说明

  • 奖项设置

奖项

奖品

奖项设置规则

奖品数量

最佳文章奖

罗技K580无线蓝牙键盘 根据文章内容质量评定 1
优质文章奖 小米充电宝(10000毫安) 文章阅读量排名前3名

3

最佳人气奖  定制衣服一件 提交文章前30名

30

  • 评奖时间

2023年1月6日,评委会将在本文评论区公布获奖名单,后续联系发放奖品。

奖品将于活动结束后20个工作日内寄出。


相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
相关文章
|
3月前
|
机器学习/深度学习 人工智能 Shell
人工智能平台PAI操作报错合集之在分布式训练过程中遇到报错,是什么原因
阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台,旨在降低AI开发门槛,加速创新,助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务,共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述,涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。
|
12天前
|
存储 人工智能 并行计算
Pai-Megatron-Patch:围绕Megatron-Core打造大模型训练加速生态
Pai-Megatron-Patch(https://github.com/alibaba/Pai-Megatron-Patch)是阿里云人工智能平台PAI研发的围绕Nvidia MegatronLM的大模型开发配套工具,旨在帮助开发者快速上手大模型,完成大模型(LLM)相关的高效分布式训练,有监督指令微调,下游任务评估等大模型开发链路。最近一年来,我们持续打磨Pai-Megatron-Patch的性能和扩展功能,围绕Megatron-Core(以下简称MCore)进一步打造大模型训练加速技术生态,推出更多的的训练加速、显存优化特性。
|
25天前
|
机器学习/深度学习 Python
训练集、测试集与验证集:机器学习模型评估的基石
在机器学习中,数据集通常被划分为训练集、验证集和测试集,以评估模型性能并调整参数。训练集用于拟合模型,验证集用于调整超参数和防止过拟合,测试集则用于评估最终模型性能。本文详细介绍了这三个集合的作用,并通过代码示例展示了如何进行数据集的划分。合理的划分有助于提升模型的泛化能力。
|
29天前
|
机器学习/深度学习 人工智能 算法
利用机器学习预测股市趋势:一个实战案例
【9月更文挑战第5天】在这篇文章中,我们将探索如何使用机器学习技术来预测股市趋势。我们将通过一个简单的Python代码示例来演示如何实现这一目标。请注意,这只是一个入门级的示例,实际应用中可能需要更复杂的模型和更多的数据。
|
2月前
|
机器学习/深度学习 人工智能 数据处理
【人工智能】项目实践与案例分析:利用机器学习探测外太空中的系外行星
探测外太空中的系外行星是天文学和天体物理学的重要研究领域。随着望远镜观测技术的进步和大数据的积累,科学家们已经能够观测到大量恒星的光度变化,并尝试从中识别出由行星凌日(行星经过恒星前方时遮挡部分光线)引起的微小亮度变化。然而,由于数据量巨大且信号微弱,传统方法难以高效准确地识别所有行星信号。因此,本项目旨在利用机器学习技术,特别是深度学习,从海量的天文观测数据中自动识别和分类系外行星的信号。这要求设计一套高效的数据处理流程、构建适合的机器学习模型,并实现自动化的预测和验证系统。
43 1
【人工智能】项目实践与案例分析:利用机器学习探测外太空中的系外行星
|
2月前
|
机器学习/深度学习 资源调度 分布式计算
阿里PAI-ChatLearn:大规模 Alignment高效训练框架正式开源
PAI-ChatLearn现已全面开源,助力用户快速、高效的Alignment训练体验。借助ChatLearn,用户可全身心投入于模型设计与效果优化,无需分心于底层技术细节。ChatLearn将承担起资源调度、数据传输、参数同步、分布式运行管理以及确保系统高效稳定运作的重任,为用户提供一站式解决方案。
|
2月前
|
机器学习/深度学习 数据采集 人工智能
揭秘大型机器学习模型背后的秘密:如何在技术深度与广度之间找到完美平衡点,探索那些鲜为人知的设计、训练与部署技巧,让你的作品脱颖而出!
【8月更文挑战第21天】大型机器学习模型是人工智能的关键方向,借助不断增强的计算力和海量数据,已实现在学术与产业上的重大突破。本文深入探讨大型模型从设计到部署的全过程,涉及数据预处理、模型架构(如Transformer)、训练技巧及模型压缩技术,旨在面对挑战时提供解决方案,促进AI技术的实用化进程。
45 1
|
2月前
|
机器学习/深度学习 分布式计算 Cloud Native
云原生架构下的高性能计算解决方案:利用分布式计算资源加速机器学习训练
【8月更文第19天】随着大数据和人工智能技术的发展,机器学习模型的训练数据量和复杂度都在迅速增长。传统的单机训练方式已经无法满足日益增长的计算需求。云原生架构为高性能计算提供了新的可能性,通过利用分布式计算资源,可以在短时间内完成大规模数据集的训练任务。本文将探讨如何在云原生环境下搭建高性能计算平台,并展示如何使用 PyTorch 和 TensorFlow 这样的流行框架进行分布式训练。
71 2
|
2月前
|
机器学习/深度学习 人工智能 关系型数据库
【机器学习】Qwen2大模型原理、训练及推理部署实战
【机器学习】Qwen2大模型原理、训练及推理部署实战
397 0
【机器学习】Qwen2大模型原理、训练及推理部署实战
|
2月前
|
机器学习/深度学习 存储 分布式计算
Hadoop与机器学习的融合:案例研究
【8月更文第28天】随着大数据技术的发展,Hadoop已经成为处理大规模数据集的重要工具。同时,机器学习作为一种数据分析方法,在各个领域都有着广泛的应用。本文将介绍如何利用Hadoop处理大规模数据集,并结合机器学习算法来挖掘有价值的信息。我们将通过一个具体的案例研究——基于用户行为数据预测用户留存率——来展开讨论。
78 0

相关产品

  • 人工智能平台 PAI
  • 下一篇
    无影云桌面