DAMO-YOLO项目原作解读:兼顾速度与精度的高效目标检测框架

简介: DAMO-YOLO项目原作解读:兼顾速度与精度的高效目标检测框架

目标检测是计算机视觉中的一个重要领域,它主要研究的是如何从输入的图像或者点云中定位出感兴趣物体的位置,在视觉 AI 的应用落地中发挥着基石的作用。现在市面上已经涌现了许多优秀易用的目标检测框架,但是在目标检测应用领域,仍然有以下几个重点问题没有解决:一是模型尺度单一,难以充分发挥用户的芯片算力。二是模型的多尺度检测能力弱,难以覆盖复杂多变的检测场景。三是模型的速度-精度曲线不够理想,在针对速度限制取舍模型时,会发现精度损失难以接受。

针对上述几个问题,结合阿里达摩院的技术积累,DAMO-YOLO 提出了自己的解法。DAMO-YOLO 中引入了 TinyNAS 技术,使得用户可以根据硬件算力进行低成本的检测模型定制,提高硬件使用效率并获得更高的精度。DAMO-YOLO 中还对检测模型的 neck、head 结构进行重新设计,创新性提出了 Heavy-Neck 模型设计范式,显著提升了模型的多尺度检测能力。最后,DAMO-YOLO 还提供了一套支持全尺度模型、异构鲁棒的蒸馏方案,实现无痛涨点,充分发挥模型潜力。此外,为了方便用户使用 DAMO-YOLO 解决自己的问题,还开源了多个工业应用模型。

机器之心最新一期线上分享邀请到了阿里巴巴达摩院算法工程师许贤哲,为大家解读他们近期的工作 DAMO-YOLO。


分享主题:DAMO-YOLO:兼顾速度与精度的高效目标检测框架

分享嘉宾:许贤哲,阿里巴巴达摩院算法工程师,天津大学通信与信息系统硕士,先后研究行人重识别、无监督学习、目标检测等方向,多次夺得 ICCV、CVPR 竞赛冠军,并担任 ECCV、CVPR 等会议审稿人。

分享摘要:DAMO-YOLO 是一个面向工业落地的目标检测框架,兼顾模型速度与精度,其训练的模型效果超越了目前的一众 YOLO 系列方法,并且仍然保持极高的推理速度。DAMO-YOLO 引入 TinyNAS 技术,使得用户可以根据硬件算力进行低成本的检测模型定制,提高硬件利用效率并且获得更高精度。DAMO-YOLO 还对检测模型中的 neck、head 结构设计,以及训练时的标签分配、数据增广等关键因素进行了优化,取得了精度和速度的全面提升。最后,DAMO-YOLO 提出了一套全尺度蒸馏方案,进一步实现全尺度模型的无痛涨点。具体细节可以参考我们的开源代码和技术报告。另外,为了方便用户使用 DAMO-YOLO 解决自己的问题,还开源了多个工业应用模型。

相关链接:

1)SOTA!模型平台项目主页链接:

https://sota.jiqizhixin.com/project/damo-yolo

2)论文链接:

https://arxiv.org/pdf/2211.15444v2.pdf

3)代码仓库:

https://github.com/tinyvision/damo-yolo

相关文章
|
人工智能 UED
DynamiCrafter:可实现任意类型静态图像转化为逼真动态视频
【2月更文挑战第17天】DynamiCrafter:可实现任意类型静态图像转化为逼真动态视频
1021 1
DynamiCrafter:可实现任意类型静态图像转化为逼真动态视频
|
算法 Go 文件存储
DAMO-YOLO: 兼顾速度与精度的新目标检测框架
我们团队最近开源了DAMO-YOLO!其效果达到了YOLO系列的SOTA,欢迎各位试用!​简介DAMO-YOLO是一个兼顾速度与精度的目标检测框架,其效果超越了目前的一众YOLO系列方法,在实现SOTA的同时,保持了很高的推理速度。DAMO-YOLO是在YOLO框架基础上引入了一系列新技术,对整个检测框架进行了大幅的修改。具体包括:基于NAS搜索的新检测backbone结构,更深的neck结构,精
1797 0
DAMO-YOLO: 兼顾速度与精度的新目标检测框架
|
算法 数据库 计算机视觉
Dataset之COCO数据集:COCO数据集的简介、下载、使用方法之详细攻略
Dataset之COCO数据集:COCO数据集的简介、下载、使用方法之详细攻略
|
机器学习/深度学习 人工智能 测试技术
【ICML2025】大模型后训练性能4倍提升!阿里云PAI团队研究成果ChunkFlow中选
近日,阿里云 PAI 团队、通义实验室与中国科学院大学前沿交叉科学学院合作在机器学习顶级会议 ICML 2025 上发表论文 Efficient Long Context Fine-tuning with Chunk Flow。ChunkFlow 作为阿里云在变长和超长序列数据集上高效训练解决方案,针对处理变长和超长序列数据的性能问题,提出了以 Chunk 为中心的训练机制,支撑 Qwen 全系列模型的长序列续训练和微调任务,在阿里云内部的大量的业务上带来2倍以上的端到端性能收益,大大降低了训练消耗的 GPU 卡时。
|
数据采集 传感器 监控
数据治理,治到什么程度才算成功?
数据治理常被误认为是技术活,实则是涉及组织、流程、文化的系统工程。本文分享从0到1落地数据治理的5大关键动作,涵盖现状诊断、组织架构搭建、标准制定、工具选择与文化建设,助你避开90%的坑,真正发挥数据价值。
|
10月前
|
人工智能 安全 机器人
终于有人帮你整理好了,火爆的“系统级提示词”支持ChatGPT、Claude、Gemini、xAI的
小华同学带你探索AI前沿!每日分享高效工具与开源技术,揭秘大模型系统提示词(System Prompts)的隐藏规则。通过 `system_prompts_leaks` 仓库,学习ChatGPT、Claude等主流AI的底层设定,掌握Prompt工程与安全攻防,助你打造专业级AI应用,提升效率50%以上!
1465 0
|
运维 Kubernetes Cloud Native
云原生时代下,如何高效构建与部署微服务
【9月更文挑战第8天】随着云计算技术的飞速发展,云原生已成为现代软件架构的重要趋势。本文将深入浅出地介绍云原生概念、微服务架构的优势以及如何在云平台上高效构建和部署微服务。我们将通过实际的代码示例,展示在Kubernetes集群上部署一个简单的微服务应用的过程,帮助读者理解云原生环境下的微服务开发和运维实践。
|
编解码 Go 文件存储
【YOLOv8改进 - 特征融合NECK】 DAMO-YOLO之RepGFPN :实时目标检测的创新型特征金字塔网络
【YOLOv8改进 - 特征融合NECK】 DAMO-YOLO之RepGFPN :实时目标检测的创新型特征金字塔网络
|
机器学习/深度学习 算法 计算机视觉
超越YOLOv10/11、RT-DETRv2/3!中科大D-FINE重新定义边界框回归任务
中科大研究团队提出了一种新型目标检测器D-FINE,通过重新定义边界框回归任务,实现超越YOLOv10/11和RT-DETRv2/3的性能。D-FINE采用细粒度分布细化(FDR)和全局最优定位自蒸馏(GO-LSD)技术,显著提高了定位精度和检测速度。在COCO数据集上,D-FINE-L/X分别达到54.0%/55.8%的AP,并在NVIDIA T4 GPU上以124/78 FPS运行。
884 13
|
人工智能 前端开发 计算机视觉
Inpaint-Web:纯浏览器端实现的开源图像处理工具
在刷短视频时,常看到情侣在景区拍照被路人“抢镜”,男朋友用手机将路人“P”掉,既贴心又有趣。最近我发现了一个纯前端实现的开源项目——inpaint-web,可在浏览器端删除照片中的部分内容,非常酷。该项目基于 WebGPU 和 WASM 技术,支持图像修复与放大,已在 GitHub 上获得 5.1k Star。项目地址:[GitHub](https://github.com/lxfater/inpaint-web)。
1470 3
 Inpaint-Web:纯浏览器端实现的开源图像处理工具

热门文章

最新文章