开发者社区> 大数据与机器学习> 人工智能平台PAI

人工智能平台PAI

关注

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

0
今日
3385
内容
27
活动
3871
关注
|
机器学习/深度学习 JSON 分布式计算
|

机器学习PAI常见问题之部署报错如何解决

PAI(平台为智能,Platform for Artificial Intelligence)是阿里云提供的一个全面的人工智能开发平台,旨在为开发者提供机器学习、深度学习等人工智能技术的模型训练、优化和部署服务。以下是PAI平台使用中的一些常见问题及其答案汇总,帮助用户解决在使用过程中遇到的问题。

472 0
|
机器学习/深度学习 存储 算法
|

机器学习PAI常见问题之页面运行报错如何解决

PAI(平台为智能,Platform for Artificial Intelligence)是阿里云提供的一个全面的人工智能开发平台,旨在为开发者提供机器学习、深度学习等人工智能技术的模型训练、优化和部署服务。以下是PAI平台使用中的一些常见问题及其答案汇总,帮助用户解决在使用过程中遇到的问题。

539 0
|
机器学习/深度学习 分布式计算 前端开发
|

线性回归模型使用技巧

【5月更文挑战第14天】线性回归基础及进阶应用概述:探讨模型假设、最小二乘法和系数估计;通过多项式特征处理非线性关系;应用正则化(Lasso、Ridge)减少过拟合;特征选择优化模型复杂度;使用GridSearchCV进行超参数调优;处理分组数据、缺失值;集成方法(Bagging)提升性能;尝试岭回归、弹性网络、高斯过程回归和鲁棒回归;利用模型融合增强预测力;应对大规模数据挑战;分析特征重要性;自动特征工程;增强模型解释性;集成模型多样性及权重调整;应用序列最小优化(SMO)、预测区间估计;动态特征选择;模型校验与调优;稳定性分析;迁移学习。

372 3
|
人工智能 自然语言处理 算法
|

数字永生源码独立部署怎么做?

数字人源码,数字人永生,数字人源码独立部署,数字人

727 1
|
机器学习/深度学习 人工智能 Java
|

机器学习PAI报错问题之跑collective gpu分布式报错如何解决

人工智能平台PAI是是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务;本合集将收录PAI常见的报错信息和解决策略,帮助用户迅速定位问题并采取相应措施,确保机器学习项目的顺利推进。

208 1
|
机器学习/深度学习 人工智能 JSON
|

人工智能平台PAI问题之推断报错如何解决

人工智能平台PAI是指阿里云提供的机器学习平台服务,支持建模、训练和部署机器学习模型;本合集将介绍机器学习PAI的功能和操作流程,以及在使用过程中遇到的问题和解决方案。

244 0
|
机器学习/深度学习 人工智能
|

人工智能平台PAI问题之维度不匹配如何解决

人工智能平台PAI是指阿里云提供的机器学习平台服务,支持建模、训练和部署机器学习模型;本合集将介绍机器学习PAI的功能和操作流程,以及在使用过程中遇到的问题和解决方案。

351 1
|
机器学习/深度学习 分布式计算 DataWorks
|

构建CTR点击模型:阿里云产品实践与技术解析

点击率(CTR)预测模型在广告和推荐系统中发挥着重要作用。本文将深入介绍如何利用阿里云相关产品搭建CTR点击模型。我们将使用MaxCompute、机器学习平台PAI、DataWorks等阿里云产品,通过代码示例和详细说明,带你一步步完成整个流程。

1052 0
|
机器学习/深度学习 人工智能 自然语言处理
|

【EMNLP 2023】基于知识迁移的跨语言机器阅读理解算法

近日,阿里云人工智能平台PAI与华南理工大学朱金辉教授团队、达摩院自然语言处理团队合作在自然语言处理顶级会议EMNLP2023上发表基于机器翻译增加的跨语言机器阅读理解算法X-STA。通过利用一个注意力机制的教师来将源语言的答案转移到目标语言的答案输出空间,从而进行深度级别的辅助以增强跨语言传输能力。同时,提出了一种改进的交叉注意力块,称为梯度解缠知识共享技术。此外,通过多个层次学习语义对齐,并利用教师指导来校准模型输出,增强跨语言传输性能。实验结果显示,我们的方法在三个多语言MRC数据集上表现出色,优于现有的最先进方法。

832 6
|
机器学习/深度学习 人工智能 自然语言处理
|

【EMNLP 2023】面向Stable Diffusion的自动Prompt工程算法BeautifulPrompt

近日,阿里云人工智能平台PAI与华南理工大学朱金辉教授团队合作在自然语言处理顶级会议EMNLP2023上发表了BeautifulPrompt的深度生成模型,可以从简单的图片描述中生成高质量的提示词,从而使文生图模型能够生成更美观的图像。BeautifulPrompt通过对低质量和高质量的提示进行微调,并进一步提出了一种基于强化学习和视觉信号反馈的技术,以最大化生成提示的奖励值

78429 57
|
机器学习/深度学习 人工智能 算法
|

CV领域再创佳绩!阿里云机器学习平台 PAI 多篇论文入选 ICCV 2023

近期,阿里云机器学习平台PAI发表的多篇论文在ICCV 2023上入选。ICCV是国际计算机视觉大会是由电气和电子工程师协会每两年举办一次的研究大会。与CVPR和ECCV一起,它被认为是计算机视觉领域的顶级会议之一。ICCV 2023将于10月2日至10月6日法国巴黎举办。ICCV汇聚了来自世界各地的学者、工程师和研究人员,分享最新的计算机视觉研究成果和技术进展。会议涵盖了计算机视觉领域的各个方向,包括图像处理、模式识别、机器学习、人工智能等等。ICCV的论文发表和演讲都备受关注,是计算机视觉领域交流和合作的重要平台。

1785 1
|
机器学习/深度学习 编解码 人工智能
|

多场景PAI-Diffusion中文模型家族大升级,12个模型、2个工具全部开源

在本文中,将详细介绍PAI-Diffusion中文模型家族及其工具Chinese Diffusion WebUI和Diffuser-API的使用。

2008 4
|
机器学习/深度学习 人工智能 开发者
|

PAI-DSW快速启动AI绘画Stable Diffusion WebUI

在本教程中,您将学习如何在阿里云交互式建模(PAI-DSW)中,基于Stable-Diffusion-WebUI快速启动Stable Diffusion WebUI,实现SD模型的推理。

1263 0
|
机器学习/深度学习 人工智能 算法
|

【保姆级教程】用PAI-DSW修复亚运历史老照片

本教程整合了来自开源社区的高质量图像修复、去噪、上色等算法,并使用 Stable Diffusion WebUI 进行交互式图像修复。参与者可以根据需要进行参数调整,组合不同的处理方式以获得最佳修复效果。参与者还可以在活动页面上传修复后的成果图片,参与比赛,获胜者将有机会获得丰厚的奖品。

44794 189
|
机器学习/深度学习 人工智能 运维
|

阿里云大语言模型(LLM)实战训练营,火热开营中!

大语言模型实战训练营已正式开营,汇集阿里云、黑马程序员多位AI领域资深技术专家手把手带您快速实现大语言模型从入门到应用落地!完成课程学习任务更有机会领取LAMY钢笔、小米充电宝、双肩包等精美礼品,快来一起学习体验吧~

1936 0
|
机器学习/深度学习 人工智能 物联网
|

快速玩转 Llama2!阿里云机器学习 PAI 推出最佳实践

近期,Meta 宣布大语言模型 Llama2 开源,阿里云机器学习平台PAI针对 Llama2 系列模型进行适配,推出全量微调、Lora微调、分布式训练、推理服务等场景最佳实践,助力AI开发者快速开箱。

12260 15
|
机器学习/深度学习 人工智能 搜索推荐
|

阿里巴巴宣布加入 Linux Foundation AI&Data 基金会,捐赠首个开源项目 DeepRec

持续加大对AI和大数据技术的投入以促进相关开源建设。

901 0
|
SQL 存储 Apache
|

Apache Paimon 在同程旅行的探索实践

本文主要介绍 Apache Paimon 在同程旅行的生产落地实践经验。

5493 0
|
消息中间件 运维 算法
|

【DSW Gallery】OneClassSVM 算法解决异常检测问题

OneClassSVM 是一种无监督的异常检测算法, 用于对无 label 的数据进行异常检测,并且支持将 OneClassSVM 模型部署成一个流服务,用来对实时数据进行异常检测。该D emo 将介绍如何在 DSW 中使用 OneClassSVM 算法解决异常检测问题。

1004 0
|
存储 机器学习/深度学习 Kubernetes
|

【DSW Gallery】如何在DLC中进行Pytorch DDP分布式训练任务

本文基于Pytorch 1.8版本,介绍了如何使用DLC进行Pytorch DDP分布式训练任务.

953 0
|
机器学习/深度学习 人工智能 自然语言处理
|

【DSW Gallery】基于EasyNLP的中文信息抽取

EasyNLP提供多种模型的训练及预测功能,旨在帮助自然语言开发者方便快捷地构建模型并应用于生产。本文以中文信息抽取为例,为您介绍如何在PAI-DSW中基于EasyNLP快速使用K-Global Pointer算法进行中文信息抽取模型的训练、评估、推理。

674 0
|
算法 PyTorch 算法框架/工具
|

【DSW Gallery】基于YOLOX模型和iTAG标注数据的图像检测示例

EasyCV是基于Pytorch,以自监督学习和Transformer技术为核心的 all-in-one 视觉算法建模工具,并包含图像分类,度量学习,目标检测,姿态识别等视觉任务的SOTA算法。本文将为您介绍如何在PAI-DSW中使用EasyCV和PAI-iTAG标注的检测数据训练YOLOX模型。

797 0
|
机器学习/深度学习 人工智能 自然语言处理
|

国内唯一!阿里云机器学习平台PAI同时入选Gartner两项权威报告

日前,国际权威研究机构 Gartner 连续发布两份 AI 领域研究报告,阿里云机器学习平台 PAI 蝉联上榜。

1006 0
|
机器学习/深度学习 人工智能 编解码
|

PAI-Diffusion 模型来了!阿里云机器学习团队带您徜徉中文艺术海洋

PAI-Diffusion系列模型,包括一系列通用场景和特定场景的文图生成模型,本⽂简要介绍PAI-Diffusion模型及其体验方式。

2056 0
|
SQL 人工智能 运维
|

效率优先,DataWorks全链路数据治理年度发布

基于阿里云强大的大数据AI一体化的平台能力,从工具层面,介绍DataWorks端到端的全链路数据开发治理平台新能力,回归工具为人服务的本质,全方位地提升一线数据开发人员/业务人员的工作效率。

928 0
|
存储 JSON 分布式计算
|

一体化大数据智能计算平台 ODPS 产品年度发布

阿里云ODPS全新升级,存储、调度、元数据一体化融合 ,从 Processing 升级为 Platform,即 Open Data Platform and Service。本次峰会,同步发布了新的产品能力,即MaxCompute 引擎新功能发布及Hologres 引擎新功能发布。

1919 1
|
存储 机器学习/深度学习 网络安全
|

【DSW Gallery】DSW如何挂载数据盘

DSW采用计算和存储分离的架构,DSW本身提供算力资源和非持久的本地存储,用户可以将NAS盘、CPFS盘或者OSS Bucket挂载到DSW的指定路径下,从而获得更高的安全性和更高的数据存储容量,并且可以在多个实例间方便的共享数据。

1587 0
|
机器学习/深度学习 编解码 缓存
|

中文稀疏GPT大模型落地 -----通往低成本&高性能多任务通用自然语言理解的关键里程碑

GPT模型能较好的处理NLP各个应用领域的任务,比如文本分类,推理,对话,问答,完形填空,阅读理解,摘要,生成等等。百亿/千亿参数量级的GPT大模型作用在这些应用领域虽然效果很好,但是训练成本非常高。

1330 0
|
并行计算 算法 PyTorch
|

【DSW Gallery】基于SwinTransformer的图像分类示例

EasyCV是基于Pytorch,以自监督学习和Transformer技术为核心的 all-in-one 视觉算法建模工具,并包含图像分类,度量学习,目标检测,姿态识别等视觉任务的SOTA算法。本文以图像分类为例,为您介绍如何在PAI-DSW中使用EasyCV。

519 0
|
机器学习/深度学习 IDE 开发工具
|

阿里云机器学习怎么玩?这本新手入门指南揭秘了!

PAI-DSW云端IDE揭秘,动手实验室畅快玩!更有四大实践场景助你快速上手, 动手体验数据科学,成为PAI-DSW探索者!

30650 0
|
存储 DataWorks 搜索推荐
|

基于PAI 10分钟搭建一个简单推荐系统

阿里巴巴技术专家傲海为大家带来基于PAI10分钟搭建一个简单推荐系统的介绍。内容包括个性化推荐业务流程,协同过滤算法,推荐方案的架构,以及实际操作四个部分。

4764 0
|
机器学习/深度学习 算法 搜索推荐
|

基于对象特征的推荐

(本实验选用数据为真实电商脱敏数据,仅用于学习,请勿商用) 在上一期基于协同过滤的的推荐场景中,我们介绍了如何通过PAI快速搭建一个基于协同过滤方案的推荐系统,这一节会介绍一些如何基于推荐对象特征的推荐方法。

12063 1

CTR_GBDT_LR

基于CTR的GBDT和LR方法融合<br />数据源:直播提供数据<br />数据大小:770 KB<br />字段数量:20<br />使用组件:拆分,读数据表,特征编码<br />

922 0
|
机器学习/深度学习 运维 监控
|

如何使用阿里云机器学习PAI的离线周期性调度功能

3531 0
|
机器学习/深度学习 人工智能 算法
|

Post-Training on PAI (3):PAI-ChatLearn,PAI 自研高性能强化学习框架

人工智能平台 PAI 推出了高性能一体化强化学习框架 PAI-Chatlearn,从框架层面解决强化学习在计算性能和易用性方面的挑战。

451 7
|
2月前
|
人工智能 C++
|

【AI大模型面试宝典五】- 基础架构篇

【AI大模型面试宝典】深入解析归一化技术:LayerNorm、RMSNorm原理与应用,Pre-norm vs Post-norm对比,助力掌握大模型训练稳定与加速收敛核心要点。高频考点+实战解析,轻松拿下offer!点赞关注,持续更新~ #大模型面试 #归一化

109 0
|
存储 人工智能 数据库
|

面向教育场景的大模型 RAG 检索增强解决方案

检索增强生成模型结合了信息检索与生成式人工智能的优点,从而在特定场景下提供更为精准和相关的答案。以人工智能平台 PAI 为例,为您介绍在云上使用一站式白盒化大模型应用开发平台 PAI-LangStudio 构建面向教育场景的大模型 RAG 检索增强解决方案,应用构建更简便,开发环境更直观。此外,PAI 平台同样发布了面向医疗、金融和法律领域的 RAG 解决方案。

644 7

如何看PAI产品下训练(train)模型任务的费用细节

PAI产品下训练(train)模型任务的费用细节

255 6
|
TensorFlow 算法框架/工具 Python
|

Restoring from checkpoint failed,Assign requires shapes of both tensors to match. lhs shape= [700,8] rhs shape= [660,8]

模型恢复出错,是特征参数不一致问题

195 5
|
人工智能 安全 大数据
|

PAI年度发布:GenAI时代AI基础设施的演进

本文介绍了AI平台在大语言模型时代的新能力和发展趋势。面对推理请求异构化、持续训练需求及安全可信挑战,平台推出了一系列优化措施,包括LLM智能路由、多模态内容生成服务、serverless部署模式等,以提高资源利用效率和降低使用门槛。同时,发布了训推一体调度引擎、竞价任务等功能,助力企业更灵活地进行训练与推理任务管理。此外,PAI开发平台提供了丰富的工具链和最佳实践,支持从数据处理到模型部署的全流程开发,确保企业和开发者能高效、安全地构建AI应用,享受AI带来的红利。

435 1
|
人工智能 算法
|

AI 写歌词,会让歌词创作变得更容易吗?

在科技迅猛发展的今天,AI已渗透至多个领域,包括歌词创作。《妙笔生词智能写歌词软件》通过强大算法与海量数据,为新手提供创作指导,快速生成多风格歌词片段,降低创作门槛,节省时间。尽管如此,优秀作品仍需创作者的情感与思考,AI辅助下的歌词创作正逐渐变得更为便捷。

486 0
|
JSON 自然语言处理 物联网
|

大语言模型数据增强与模型蒸馏解决方案

本方案以通义千问2(Qwen2)大语言模型为基础,为您介绍大语言模型数据增强和蒸馏解决方案的完整开发流程。

1108 3
|
监控 数据安全/隐私保护 异构计算
|

借助PAI-EAS一键部署ChatGLM,并应用LangChain集成外部数据

【8月更文挑战第8天】借助PAI-EAS一键部署ChatGLM,并应用LangChain集成外部数据

336 1
|
机器学习/深度学习 编译器 TensorFlow
|

【ASPLOS2024】RECom:通过编译器技术加速推荐模型推理,论文中选并获得荣誉奖项!

2024年5月,关于推荐模型自动编译优化的论文《RECom: A Compiler Approach to Accelerate Recommendation Model Inference with Massive Embedding Columns》在系统领域顶会ASPLOS 2024上中选并进行了展示,并被授予了Distinguished Artifact Award 荣誉,以表彰RECom的易用性与结果的可复现性。

479 10
|
机器学习/深度学习 人工智能 自然语言处理
|

基于PAI-QuickStart搭建一站式模型训练服务体验

【8月更文挑战第5天】基于PAI-QuickStart搭建一站式模型训练服务体验

451 0
|
存储 人工智能 JSON
|

AI点燃体育热情— 在 PAI Artlab 创作你的奥运时刻!

为了向在赛场上的奥运健儿传递最真挚的鼓舞与喝彩,我们特此发起一场别开生面的“创意海报设计挑战”!在 Artlab 平台 ComfyUI 工具中,选择你心中的奥运项目,定制一张专属于你的奥运会加油海报!

594 7
|
机器学习/深度学习 人工智能 Shell
|

人工智能平台PAI操作报错合集之在分布式训练过程中遇到报错,是什么原因

阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台,旨在降低AI开发门槛,加速创新,助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务,共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述,涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。

308 1
|
机器学习/深度学习 人工智能 分布式计算
|

人工智能平台PAI使用问题之如何使用${bizdate} 参数来指定分区表

阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台,旨在降低AI开发门槛,加速创新,助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务,共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述,涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。

249 0
|
机器学习/深度学习 消息中间件 人工智能
|

人工智能平台PAI使用问题之EasyRec训练的步骤是怎样的

阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台,旨在降低AI开发门槛,加速创新,助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务,共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述,涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。

243 0
我要发布