类目筛选
基于 AI 网关和 llmaz，提升 vLLM 推理服务可用性和部署易用性的实践
本文介绍了如何使用 llmaz 快速部署基于 vLLM 的大语言模型推理服务，并结合 Higress AI 网关实现流量控制、可观测性、故障转移等能力，构建稳定、高可用的大模型服务平台。
新一代端侧模型，面壁 MiniCPM 2.0开源，魔搭社区最佳实践
MiniCPM-V 2.0 不仅带来优秀端侧多模态通用能力，更带来惊艳的 OCR 表现。通过自研的高清图像解码技术，可以突破传统困境，让更为精准地识别充满纷繁细节的街景、长图在端侧成为可能。
自动化搭建专属 AI 绘图服务
本文介绍了如何使用通义万相AIGC技术和阿里云的计算和存储产品来搭建自己的AI绘画服务。首先，通过创建基础云产品资源和部署AI绘画服务的步骤来开始搭建服务。然后，介绍了模板的原理和内容，以及ROS编排引擎的作用。接下来，详细介绍了AI绘画服务的一键部署过程，包括定义参数、模板的编写和ROS的使用。最后，提到了应用运行环境的搭建和自定义应用页面的方法。通过ROS的自动化部署，用户可以方便快捷地拥有自己的AI绘画服务。
ROS CDK魔法书：点亮博客上云新技能（TypeScript篇）
阿里云ROS CDK是资源编排服务的命令行工具，它允许开发者用编程语言（如TypeScript、JavaScript等）定义云资源，简化了JSON或YAML模板的使用。ROS CDK的Asset模块用于将本地文件上传到OSS（对象存储服务），实现了本地资源到云端的自动化迁移。在实践中，通过初始化工程、配置凭证、使用Asset模块创建资源描述，然后通过CDK部署到OSS，实现静态网站的云上托管。此外，ROS CDK支持版本控制、多团队协作和自动化部署，提高了基础设施管理的效率和一致性。
大模型推理服务全景图
推理性能的提升涉及底层硬件、模型层，以及其他各个软件中间件层的相互协同，因此了解大模型技术架构的全局视角，有助于我们对推理性能的优化方案进行评估和选型。
使用A10单卡24G复现DeepSeek R1强化学习过程
本文描述DeepSeek的三个模型的学习过程，其中DeepSeek-R1-Zero模型所涉及的强化学习算法，是DeepSeek最核心的部分之一会重点展示。
QwQ-32B一键部署，真正的0代码，0脚本，0门槛
阿里云发布的QwQ-32B模型通过强化学习显著提升了推理能力，核心指标达到DeepSeek-R1满血版水平。用户可通过阿里云系统运维管理（OOS）一键部署OpenWebUI+Ollama方案，轻松将QwQ-32B模型部署到ECS，或连接阿里云百炼的在线模型。整个过程无需编写代码，全部在控制台完成，适合新手操作。
通义千问开源模型在PAI灵骏的最佳实践
本文将展示如何基于阿里云PAI灵骏智算服务，在通义千问开源模型之上进行高效分布式继续预训练、指令微调、模型离线推理验证以及在线服务部署。
Modelscope结合α-UMi：基于Modelscope的多模型协作Agent
基于单个开源小模型的工具调用Agent，由于模型容量和预训练能力获取的限制，无法在推理和规划、工具调用、回复生成等任务上同时获得比肩大模型等性能。