阿里云大数据Al技术
阿里云大数据Al技术_个人页
阿里云大数据Al技术
文章
351
问答
1
视频
0
个人介绍
阿里云大数据Al技术
擅长的技术
-
发表了文章 2024-11-05
DistilQwen2：通义千问大模型的知识蒸馏实践
DistilQwen2 是基于 Qwen2大模型，通过知识蒸馏进行指令遵循效果增强的、参数较小的语言模型。本文将介绍DistilQwen2 的技术原理、效果评测，以及DistilQwen2 在阿里云人工智能平台 PAI 上的使用方法，和在各开源社区的下载使用教程。
-
发表了文章 2024-10-21
PAI 大语言模型评测平台现已支持裁判员模型评测
本文将为您介绍如何在 PAI 大语言模型评测平台，基于裁判员模型，评价开源模型或者微调后模型的性能。该功能限时免费，欢迎使用。
-
发表了文章 2024-10-12
云栖实录 | 智能运维年度重磅发布及大模型实践解读
阿里云大数据运维团队重磅发布云原生大规模集群场景的 GitOps 方案，该方案基于 OAM 云原生模型，促进研发与运维人员协作，同时兼顾变更的过程管理和终态管理，可实现变更的自动化、代码化、透明化。此外，阿里云大数据运维团队分享了大模型在大数据智能运维场景的应用实践，通过引入检索增强生成（RAG）方法和其他优化策略，大幅提高了在智能问答和智能诊断方面知识的关联性和检索精度，并基于多智能体框架建立高效的数据分析和决策支持系统。
-
发表了文章 2024-10-11
大数据&AI产品月刊【2024年9月】
大数据& AI 产品技术月刊【2024年9月】，涵盖本月技术速递、2024云栖大会实录、产品和功能发布、市场和客户应用实践等内容，帮助您快速了解阿里云大数据& AI 方面最新动态。
-
提交了问题
2024-09-27
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
-
发表了文章 2024-09-27
使用PAI+LLaMA Factory 微调 Qwen2-VL 模型，搭建文旅领域知识问答机器人
本次教程介绍了如何使用 PAI ×LLaMA Factory 框架，基于全参方法微调 Qwen2-VL 模型，使其能够进行文旅领域知识问答，同时通过人工测试验证了微调的效果。
-
发表了文章 2024-09-27
云栖实录 | GenAI 时代 AI Infra 工程技术趋势与平台演进
本文根据2024云栖大会实录整理而成，演讲信息如下： 演讲人：林伟 | 阿里云智能集团研究员、阿里云人工智能平台 PAI 负责人；黄博远｜阿里云智能集团资深产品专家、阿里云人工智能平台 PAI 产品负责人 活动：2024 云栖大会 - AI Infra 核心技术专场、人工智能平台 PAI 年度发布专场
-
发表了文章 2024-09-23
Pai-Megatron-Patch：围绕Megatron-Core打造大模型训练加速生态
Pai-Megatron-Patch（https://github.com/alibaba/Pai-Megatron-Patch）是阿里云人工智能平台PAI研发的围绕Nvidia MegatronLM的大模型开发配套工具，旨在帮助开发者快速上手大模型，完成大模型（LLM）相关的高效分布式训练，有监督指令微调，下游任务评估等大模型开发链路。最近一年来，我们持续打磨Pai-Megatron-Patch的性能和扩展功能，围绕Megatron-Core（以下简称MCore）进一步打造大模型训练加速技术生态，推出更多的的训练加速、显存优化特性。
-
发表了文章 2024-09-23
TAG：BladeLLM 的纯异步推理架构
近期，大模型推理社区（vLLM，SGLang 等）普遍开始关注框架运行时开销，提出了多步调度、异步输出处理、独立 API Server 进程等工作，来分摊或掩盖部分开销。 在我们的实际业务场景中，也观察到高额的框架开销严重限制了系统吞吐，特别是在高并发（>1k）场景下，运行时开销已经接近或高于 GPU 运行时间，导致资源严重浪费和性能下降。为此，BladeLLM 设计并实现了基于 Python 的纯异步 LLM 推理架构 -- TAG (Totally Asynchronous Generator) ，以最大程度提高 GPU 利用率，提升引擎性能。
-
发表了文章 2024-09-23
AI Native平台，跨越AI应用从创新到生产的鸿沟
2024年是AI应用的元年，以大模型为中心的 AI Native 应用大爆发正在从理想变成现实。云计算带来的应用创新潮，经历了虚拟机时代和云原生时代，正在全面拥抱以大模型为核心的 AI Native 阶段，推动大数据与AI的工作流前所未有地紧密结合。领先大模型、高效的AI计算平台和统一的大数据平台是 AI Native 应用广泛落地背后不可获缺的要素。 9月20日，2024云栖大会上，阿里云副总裁、阿里云计算平台事业部负责人汪军华宣布大数据AI平台全面升级，为 AI Native 应用大爆发提供坚实的平台支撑。
-
发表了文章 2024-09-18
“我在云栖大会等你”—来PAI Artlab定格你的云栖记忆！
在云栖大会上，通过PAI Artlab的ComfyUI，轻松生成个性化数字影像。只需几个简单步骤，即可将你的肖像融入大会经典场景，创造独特回忆。快来加入我们，让PAI Artlab为你的云栖之行增添一抹亮色！
-
发表了文章 2024-08-30
大语言模型数据增强与模型蒸馏解决方案
本方案以通义千问2（Qwen2）大语言模型为基础，为您介绍大语言模型数据增强和蒸馏解决方案的完整开发流程。
-
发表了文章 2024-08-29
阿里PAI-ChatLearn：大规模 Alignment高效训练框架正式开源
PAI-ChatLearn现已全面开源，助力用户快速、高效的Alignment训练体验。借助ChatLearn，用户可全身心投入于模型设计与效果优化，无需分心于底层技术细节。ChatLearn将承担起资源调度、数据传输、参数同步、分布式运行管理以及确保系统高效稳定运作的重任，为用户提供一站式解决方案。
-
发表了文章 2024-08-26
Big Data for AI实践：面向AI大模型开发和应用的大规模数据处理套件
文叙述的 Big Data for AI 最佳实践，基于阿里云人工智能平台PAI、MaxCompute自研分布式计算框架MaxFrame、Data-Juicer等产品和工具，实现了大模型数据采集、清洗、增强及合成大模型数据的全链路，解决企业级大模型开发应用场景的数据处理难题。
-
发表了文章 2024-08-26
【KDD2024】大数据基础工程技术集群异常检测论文入选
阿里云计算平台大数据基础工程技术团队主导，与浙江大学合作的论文《Cluster-Wide Task Slowdown Detection in Cloud System》被数据挖掘领域顶会ACM SIGKDD2024接收
-
发表了文章 2024-08-22
【ASPLOS2024】RECom：通过编译器技术加速推荐模型推理，论文中选并获得荣誉奖项！
2024年5月，关于推荐模型自动编译优化的论文《RECom: A Compiler Approach to Accelerate Recommendation Model Inference with Massive Embedding Columns》在系统领域顶会ASPLOS 2024上中选并进行了展示，并被授予了Distinguished Artifact Award 荣誉，以表彰RECom的易用性与结果的可复现性。
-
发表了文章 2024-08-19
【ACL2024】基于长尾检索知识增强的大语言模型
近日，阿里云人工智能平台PAI与阿里集团安全部内容安全算法团队、华东师范大学何晓丰教授团队合作，在自然语言处理顶级会议ACL2024上发表论文《On the Role of Long-tail Knowledge in Retrieval Augmented Large Language Models》，论文主题为长尾知识检索增强的大语言模型。通过将问题识别为普通可回答和长尾两种性质，让大模型针对性的对长尾问题进行检索文档增强。对于普通可回答的用户提问可以直接通过大模型回答，而不需要进行文档检索增强，从而能增强大模型处理不同类型用户提问的效率。
-
发表了文章 2024-08-13
阿里云智能大数据演进
本文根据7月24日飞天发布时刻产品发布会、7月5日DataFunCon2024·北京站：大数据·大模型.双核时代实录整理而成
-
发表了文章 2024-08-12
飞天发布时刻：大数据AI平台产品升级发布
阿里云飞天发布时刻产品发布会围绕阿里云大数据AI平台的新能力和新产品进行详细介绍。人工智能平台PAI、云原生大数据计算服务MaxCompute、开源大数据平台E-MapReduce、实时数仓Hologres、阿里云Elasticsearch、向量检索Milvus等产品均带来了相关发布的深度解读。
-
发表了文章 2024-08-12
【ACL2024】阿里云人工智能平台PAI多篇论文入选ACL2024
近期，阿里云人工智能平台PAI的多篇论文在ACL2024上入选。论文成果是阿里云与阿里集团安全部、华南理工大学金连文教授团队、华东师范大学何晓丰教授团队共同研发。ACL（国际计算语言学年会）是人工智能自然语言处理领域的顶级国际会议，聚焦于自然语言处理技术在各个应用场景的学术研究。该会议曾推动了预训练语言模型、文本挖掘、对话系统、机器翻译等自然语言处理领域的核心创新，在学术和工业界都有巨大的影响力。此次入选标志着阿里云人工智能平台PAI在自然语言处理和多模态算法、算法框架能力方面研究获得了学术界认可。
-
发表了文章 2024-08-05
AI点燃体育热情— 在 PAI Artlab 创作你的奥运时刻！
为了向在赛场上的奥运健儿传递最真挚的鼓舞与喝彩，我们特此发起一场别开生面的“创意海报设计挑战”！在 Artlab 平台 ComfyUI 工具中，选择你心中的奥运项目，定制一张专属于你的奥运会加油海报！
-
发表了文章 2024-07-23
使用PAI×LLaMA Factory 微调 Llama3 模型
本次教程介绍了如何使用PAI和LLaMA Factory框架，基于轻量化LoRA方法微调Llama-3模型，使其能够进行中文问答和角色扮演，同时通过验证集ROUGE分数和人工测试验证了微调的效果。在后续实践中，可以使用实际业务数据集，对模型进行微调，得到能够解决实际业务场景问题的本地领域大模型。
-
发表了文章 2024-07-16
EasyAnimate-v3版本支持I2V及超长视频生成
阿里云人工智能平台（PAI）自研开源的视频生成项目EasyAnimate正式发布v3版本
-
发表了文章 2024-07-11
阿里云人工智能平台PAI论文入选OSDI '24
阿里云人工智能平台PAI的论文《Llumnix: Dynamic Scheduling for Large Language Model Serving》被OSDI '24录用。论文通过对大语言模型（LLM）推理请求的动态调度，大幅提升了推理服务质量和性价比。
-
发表了文章 2024-07-10
大数据&AI产品月刊【2024年6月】
大数据&AI产品技术月刊【2024年6月】，涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容，帮助您快速了解阿里云大数据&AI方面最新动态。
-
发表了文章 2024-07-09
大语言模型的直接偏好优化（DPO）对齐在PAI-QuickStart实践
阿里云的人工智能平台PAI，作为一站式的机器学习和深度学习平台，对DPO算法提供了全面的技术支持。无论是开发者还是企业客户，都可以通过PAI-QuickStart轻松实现大语言模型的DPO对齐微调。本文以阿里云最近推出的开源大型语言模型Qwen2（通义千问2）系列为例，介绍如何在PAI-QuickStart实现Qwen2的DPO算法对齐微调。
-
发表了文章 2024-07-04
「PAI-ArtLab100 AIGC」设计普惠计划发布！与 100+ 高校共同探索 AIGC 教育新路径
6月28日，D20全球设计院长峰会（简称D20峰会）在杭州阿里巴巴全球总部召开。峰会现场，阿里云高校合作部、阿里云人工智能平台PAI，以及阿里云设计中心联合发布「ArtLab100 AIGC设计普惠计划」（简称ArtLab100计划），与 100+ 高校共同探索 AIGC 教育新路径。旨在推动设计艺术教育与人工智能技术的深度结合，培育新时代的设计创新人才，同时加强校企合作，促进产业界与学术界的协同进步。
-
发表了文章 2024-06-27
在PAI Artlab一键实现欧洲杯粉丝专属贴纸制作
嘿，各位足球狂热分子，准备好迎接欧洲杯的狂欢了吗？你的加油装备还缺了点啥？别担心，ArtLab平台一键贴纸生成工作流，来给这足球盛宴加点料啦！快来，让我们一起把激情和创意混搭出新高度！
-
发表了文章 2024-06-19
基于EasyAnimate模型的视频生成最佳实践
EasyAnimate是阿里云PAI平台自主研发的DiT的视频生成框架，它提供了完整的高清长视频生成解决方案，包括视频数据预处理、VAE训练、DiT训练、模型推理和模型评测等。本文为您介绍如何在PAI平台集成EasyAnimate并一键完成模型推理、微调及部署的实践流程。
-
发表了文章 2024-06-19
阿里云PAI大模型评测最佳实践
在大模型时代，模型评测是衡量性能、精选和优化模型的关键环节，对加快AI创新和实践至关重要。PAI大模型评测平台支持多样化的评测场景，如不同基础模型、微调版本和量化版本的对比分析。本文为您介绍针对于不同用户群体及对应数据集类型，如何实现更全面准确且具有针对性的模型评测，从而在AI领域可以更好地取得成就。
-
发表了文章 2024-06-18
【CVPR2024】面向StableDiffusion的编辑算法FreePromptEditing，提升图像编辑效果
近日，阿里云人工智能平台PAI与华南理工大学贾奎教授团队合作在深度学习顶级会议 CVPR2024 上发表 FPE(Free-Prompt-Editing) 算法，这是一种面向StableDiffusion的图像编辑算法。在这篇论文中，StableDiffusion可用于实现图像编辑的本质被挖掘，解释证明了基于StableDiffusion编辑的算法本质，并基于此设计了新的图像编辑算法，大幅度提升了图像编辑的效率。
-
发表了文章 2024-06-17
【CVPR2024】阿里云人工智能平台PAI图像编辑算法论文入选CVPR2024
近期，阿里云人工智能平台PAI发表的图像编辑算法论文在CVPR-2024上正式亮相发表。论文成果是阿里云与华南理工大学贾奎教授领衔的团队共同研发。此次入选标志着阿里云人工智能平台PAI自主研发的图像编辑算法达到了先进水平，赢得了国际学术界的认可。在阿里云人工智能平台PAI算法团队和华南理工大学的老师学生们一同的坚持和热情下，将阿里云在图像生成与编辑领域的先进理念得以通过学术论文和会议的形式，向业界传递和展现。
-
发表了文章 2024-06-14
通义千问2(Qwen2)大语言模型在PAI-QuickStart的微调、评测与部署实践
阿里云的人工智能平台PAI，作为一站式的机器学习和深度学习平台，对Qwen2模型系列提供了全面的技术支持。无论是开发者还是企业客户，都可以通过PAI-QuickStart轻松实现Qwen2系列模型的微调、评测和快速部署。
-
发表了文章 2024-06-13
大数据&AI产品月刊【2024年5月】
大数据&AI产品技术月刊【2024年5月】，涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容，帮助您快速了解阿里云大数据&AI方面最新动态。
-
发表了文章 2024-06-07
AIGC创作活动 | 智"绘"AI,使用PAI创造风格百变绘画助手
使用阿里云人工智能平台PAIx Free Prompt Editing图像编辑算法，开发个人AIGC绘图小助理，实现文本驱动的图像编辑功能单卡即可完成AIGC图片风格变化、背景变化和主体变化等功能。让我们一同开启这场旅程，为您的图像编辑添上无限可能性的翅膀吧。
-
发表了文章 2024-06-05
[WWW2024]轻量数据依赖的异常检测重训练方法LARA
阿里云计算平台大数据基础工程技术团队主导，与浙江大学合作的论文《LARA: ALight and Anti-overfitting Retraining Approach for Unsupervised Time Series Anomaly Detection 》被WWW2024收录
-
发表了文章 2024-06-04
视频生成框架EasyAnimate正式开源！
EasyAnimate是人工智能平台PAI自主研发的DiT-based视频生成框架，它提供了完整的高清长视频生成解决方案，包括视频数据预处理、VAE训练、DiT训练、模型推理和模型评测等。可以使用EasyAnimate进行任意风格视频模型的训练和推理，还可以在预训练模型的基础上，通过少量图片的LoRA微调来改变生成视频的风格。
-
发表了文章 2024-05-31
[ICDE2024]多正常模式感知的频域异常检测算法MACE
阿里云计算平台大数据基础工程技术团队主导，与浙江大学合作的论文《Learning Multi-Pattern Normalities in the Frequency Domain for Efficient Time Series Anomaly Detection》被ICDE2024收录，该论文解决了云服务环境中不同服务存在不同正常模式，而传统神经网络一个训练好的模型只能较好捕捉一种或少数几种正常模式的问题，该论文提出的方法可以使用一个统一模型对不同服务进行检测，就达到比为每一个服务定制一个模型的SOTA方法更好的效果。
-
发表了文章 2024-05-30
[ICLR 2024] 基于Pathways架构的自适应多尺度时间序列预测模型Pathformer
阿里云计算平台大数据基础工程技术团队主导，与华东师范大学数据科学与工程学院合作的论文《Pathformer: Multi-Scale Transformers With Adaptive Pathways For Time Series Forecasting》被ICLR 2024接收，该论文提出了基于Pathways架构的自适应多尺度时间序列预测模型Pathformer，它从时间分辨率和时间距离角度进行多尺度时序建模，同时进一步提出自适应Pathways来动态调整多尺度建模过程，基于两者，Pathformer在阿里云数据集和公开数据集上取得SOTA预测效果，并展现出不错的泛化性和迁移性。
-
发表了文章 2024-05-29
[ICLR2024]基于对比稀疏扰动技术的时间序列解释框架ContraLSP
《Explaining Time Series via Contrastive and Locally Sparse Perturbations》被机器学习领域顶会ICLR 2024接收。该论文提出了一种创新的基于扰动技术的时间序列解释框架ContraLSP，该框架主要包含一个学习反事实扰动的目标函数和一个平滑条件下稀疏门结构的压缩器。论文在白盒时序预测，黑盒时序分类等仿真数据，和一个真实时序数据集分类任务中进行了实验，ContraLSP在解释性能上超越了SOTA模型，显著提升了时间序列数据解释的质量。
-
发表了文章 2024-05-27
DeepRec Extension 打造稳定高效的分布式训练
DeepRec Extension 即 DeepRec 扩展，在 DeepRec 训练推理框架之上，围绕大规模稀疏模型分布式训练，我们从训练任务的视角提出了自动弹性训练，分布式容错等功能，进一步提升稀疏模型训练的整体效率，助力 DeepRec 引擎在稀疏场景中发挥更大的优势。
-
发表了文章 2024-05-27
阿里云PAI发布DeepRec Extension，打造稳定高效的分布式训练，并宣布开源！
阿里云人工智能平台PAI正式发布自研的 DeepRec Extension（即 DeepRec 扩展），旨在以更低成本，更高效率进行稀疏模型的分布式训练。
-
发表了文章 2024-05-20
使用 PAI-DSW x Free Prompt Editing图像编辑算法，开发个人AIGC绘图小助理
在本教程中，您将学习在阿里云交互式建模平台PAI-DSW x Free Prompt Editing图像编辑算法，开发个人AIGC绘图小助理，实现文本驱动的图像编辑功能单卡即可完成AIGC图片风格变化、背景变化和主体变化等功能。让我们一同开启这场旅程，为您的图像编辑添上无限可能性的翅膀吧。
-
发表了文章 2024-05-14
大数据&AI产品月刊【2024年4月】
大数据&AI产品技术月刊【2024年4月】，涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容，帮助您快速了解阿里云大数据&AI方面最新动态。
-
发表了文章 2024-05-07
大数据基础工程技术团队4篇论文入选ICLR，ICDE，WWW
近日，由阿里云计算平台大数据基础工程技术团队主导的四篇时间序列相关论文分别被国际顶会ICLR2024、ICDE2024和WWW2024接收。
-
发表了文章 2024-04-07
AIGC创作活动 | 跟着UP主秋葉一起部署AI视频生成应用！
本次AI创作活动由 B 站知名 AI Up 主“秋葉aaaki”带您学习在阿里云 模型在线服务（PAI-EAS）中零代码、一键部署基于ComfyUI和Stable Video Diffusion模型的AI视频生成Web应用，快速实现文本生成视频的AI生成解决方案，帮助您完成社交平台短视频内容生成、动画制作等任务。制作上传专属GIF视频，即有机会赢取乐歌M2S台式升降桌、天猫精灵、定制保温杯等好礼！
-
发表了文章 2024-04-07
大数据&AI产品月刊【2024年3月】
大数据&AI产品技术月刊【2024年3月】，涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容，帮助您快速了解阿里云大数据&AI方面最新动态。
-
发表了文章 2024-04-01
一键生成视频，用 PAI-EAS 部署 AI 视频生成模型 SVD 工作流
本教程将带领大家免费领取阿里云PAI-EAS的免费试用资源，并且带领大家在 ComfyUI 环境下使用 SVD的模型，根据任何图片生成一个小短视频。
-
发表了文章 2024-03-26
基于 NVIDIA Megatron-Core 的 MoE LLM 实现和训练优化
本文将分享阿里云人工智能平台 PAI 团队与 NVIDIA Megatron-Core 团队在 MoE (Mixture of Experts) 大型语言模型（LLM）实现与训练优化上的创新工作。
-
发表了文章 2024-03-25
TorchAcc：基于 TorchXLA 的分布式训练框架
阿里云研究员、阿里云人工智能平台 PAI 技术负责人--林伟在GTC 2024 大会 China AI Day 线上中文演讲专场上介绍了TorchAcc，这是一个基于 PyTorch/XLA 的大模型分布式训练框架。
暂无更多信息
-
发表了文章
2024-11-20
DistilQwen2 蒸馏小模型在 PAI-QuickStart 的训练、评测、压缩及部署实践
-
发表了文章
2024-11-11
大数据& AI 产品月刊【2024年10月】
-
发表了文章
2024-11-08
【EMNLP2024】基于多轮课程学习的大语言模型蒸馏算法 TAPIR
-
发表了文章
2024-11-07
【EMNLP2024】面向长文本的文视频表征学习与检索模型 VideoCLIP-XL
-
发表了文章
2024-11-06
【EMNLP2024】阿里云人工智能平台 PAI 多篇论文入选 EMNLP2024
-
发表了文章
2024-11-05
DistilQwen2：通义千问大模型的知识蒸馏实践
-
发表了文章
2024-10-24
多模态大模型活动 | 使用 PAI×LLaMA Factory 搭建文旅问答机器人
-
发表了文章
2024-10-21
PAI 大语言模型评测平台现已支持裁判员模型评测
-
发表了文章
2024-10-16
【MM2024】面向 StableDiffusion 的多目标图像编辑算法 VICTORIA
-
发表了文章
2024-10-15
【MM2024】阿里云 PAI 团队图像编辑算法论文入选 MM2024
-
发表了文章
2024-10-12
云栖实录 | 智能运维年度重磅发布及大模型实践解读
-
发表了文章
2024-10-11
大数据&AI产品月刊【2024年9月】
-
发表了文章
2024-09-27
使用PAI+LLaMA Factory 微调 Qwen2-VL 模型，搭建文旅领域知识问答机器人
-
发表了文章
2024-09-27
云栖实录 | GenAI 时代 AI Infra 工程技术趋势与平台演进
-
发表了文章
2024-09-27
首个大数据批流融合国家标准正式发布，阿里云为牵头起草单位！
-
发表了文章
2024-09-23
Pai-Megatron-Patch：围绕Megatron-Core打造大模型训练加速生态
-
发表了文章
2024-09-23
TAG：BladeLLM 的纯异步推理架构
-
发表了文章
2024-09-23
【Paper Reading】结合 NanoFlow 研究，优化大语言模型服务效率的探索
-
发表了文章
2024-09-23
AI Native平台，跨越AI应用从创新到生产的鸿沟
-
发表了文章
2024-09-18
“我在云栖大会等你”—来PAI Artlab定格你的云栖记忆！
滑动查看更多
暂无更多信息