【论文速递】CVPR2022-弱监督旋转不变的航空目标检测网络

简介: 【论文速递】CVPR2022-弱监督旋转不变的航空目标检测网络

【论文原文】:Weakly Supervised Rotation-Invariant Aerial Object Detection Network

获取地址:https://ieeexplore.ieee.org/document/9880297

博主关键词: 目标检测,弱监督学习


摘要:


弱监督航空目标检测(weakly supervised object detection,WOSD)是一个值得探索的难题。现有的主要WSOD方法建立在常规CNN的基础上,这些CNN难以建模旋转不变性,从而导致检测器对方向变化过分敏感。同时,当前的解决方案很容易 忽略得分较低的实例,并可能将它们视为背景。为了解决这些问题,在本文中,我们提出了一种端到端弱监督旋转不变航空目标检测网络(RINet),通过多分支在线检测器细化,使得网络对旋转目标具有更高的旋转感知能力。具体而言,首先通过逐渐细化的方式,将预测实例中的标签传播到旋转实例中。同时,在不同旋转感知分支之间,耦合预测的实例级标签,生成旋转一致性监督,从而挖掘出更多不同角度的所有可能实例。RINet强制并鼓励WSOD的一致但互补的特征学习,而无需额外的注释和超参数。在具有挑战性的NWPU VHR-10.v2和DIOR数据集上,大量实验清楚地表明,我们将现有的 WSOD方法显着提升到一个新的最先进的性能。


简介:


在遥感图像中,许多相同类别的对象实例通常以任意方向出现,引入了与类无关的特征变化,导致特征分布稀疏。如图一所示,现有的弱监督目标检测方法(WSOD)存在两个典型问题:

1.旋转敏感: 即使是同一个对象,图像旋转前后的检测结果也可能会不一致。

2.实例丢失: 现有大多数WSOD工作仅探索最具辨别力的目标。然而,航空图像通常包含许多相同类别的实例,得分较低的实例可能被看作是背景,导致目标检测器学习不稳定。

640.jpg

图1. 航空图像中弱监督目标检测方法(WSOD)的两个典型问题

RINet通过旋转不变学习和多实例挖掘这两个模块,保持一致性和互补学习解决了旋转敏感和实例丢失问题。如图2所示,具体来说,我们首先将旋转变换前后的图像同时馈送到一个统一的多实例检测网络中,该网络由检测分支、旋转检测分支和旋转不变检测分支组成。

1.旋转不变学习:< 旋转不变模块生成旋转一致性标签,使得检测器对旋转前和旋转后的图像,统一预测标记的实例,从而捕获旋转不变特征。

2.多实例挖掘: 以互补的方式,耦合不同旋转感知分支的实例,从而挖掘出更多具有相同类别的所有可能实例。

640.png

图2.网络架构

相关文章
|
2月前
|
编解码 Go 文件存储
【YOLOv8改进 - 特征融合NECK】 DAMO-YOLO之RepGFPN :实时目标检测的创新型特征金字塔网络
【YOLOv8改进 - 特征融合NECK】 DAMO-YOLO之RepGFPN :实时目标检测的创新型特征金字塔网络
|
4月前
|
机器学习/深度学习 计算机视觉 知识图谱
【YOLOv8改进】MobileViT 更换主干网络: 轻量级、通用且适合移动设备的视觉变压器 (论文笔记+引入代码)
MobileViT是针对移动设备的轻量级视觉Transformer网络,结合CNN的局部特征、Transformer的全局注意力和ViT的表示学习。在ImageNet-1k上,它以600万参数实现78.4%的top-1准确率,超越MobileNetv3和DeiT。MobileViT不仅适用于图像分类,还在目标检测等任务中表现出色,且优化简单,代码已开源。YOLOv8引入了MobileViT块,整合卷积和Transformer结构,提升模型性能。更多详情可参考相关专栏和链接。
|
1月前
|
机器学习/深度学习 算法 网络架构
神经网络架构殊途同归?ICML 2024论文:模型不同,但学习内容相同
【8月更文挑战第3天】《神经语言模型的缩放定律》由OpenAI研究人员完成并在ICML 2024发表。研究揭示了模型性能与大小、数据集及计算资源间的幂律关系,表明增大任一资源均可预测地提升性能。此外,论文指出模型宽度与深度对性能影响较小,较大模型在更多数据上训练能更好泛化,且能高效利用计算资源。研究提供了训练策略建议,对于神经语言模型优化意义重大,但也存在局限性,需进一步探索。论文链接:[https://arxiv.org/abs/2001.08361]。
26 1
|
2月前
|
计算机视觉 网络架构
【YOLOv8改进 - 卷积Conv】DWRSeg:扩张式残差分割网络,提高特征提取效率和多尺度信息获取能力,助力小目标检测
YOLO目标检测专栏探讨了YOLO的创新改进,如多尺度特征提取的DWRSeg网络。该网络通过区域残差化和语义残差化提升效率,使用DWR和SIR模块优化高层和低层特征。DWRSeg在Cityscapes和CamVid数据集上表现优秀,速度与准确性兼备。论文和代码已公开。核心代码展示了一个包含DWR模块的卷积层。更多配置详情见相关链接。
|
1月前
|
人工智能 算法 安全
【2023 年第十三届 MathorCup 高校数学建模挑战赛】C 题 电商物流网络包裹应急调运与结构优化问题 赛后总结之31页论文及代码
本文总结了2023年第十三届MathorCup高校数学建模挑战赛C题的解题过程,详细阐述了电商物流网络在面临突发事件时的包裹应急调运与结构优化问题,提出了基于时间序列预测、多目标优化、遗传算法和重要性评价模型的综合解决方案,并提供了相应的31页论文和代码实现。
41 0
|
3月前
|
机器学习/深度学习 算法 计算机视觉
没有公式,不要代码,让你理解 RCNN:目标检测中的区域卷积神经网络
没有公式,不要代码,让你理解 RCNN:目标检测中的区域卷积神经网络
68 0
没有公式,不要代码,让你理解 RCNN:目标检测中的区域卷积神经网络
|
3月前
|
Web App开发 自然语言处理 算法
一文搞懂:【论文笔记】BINE:二分网络嵌入
一文搞懂:【论文笔记】BINE:二分网络嵌入
24 0
|
2天前
|
安全 算法 网络安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【9月更文挑战第8天】本文将探讨网络安全与信息安全的重要性,以及如何保护个人和组织的信息资产。我们将讨论网络安全漏洞、加密技术、安全意识等方面的内容,并提供一些实用的建议和技巧来帮助读者提高他们的网络安全水平。无论你是个人用户还是企业管理员,都可以从本文中获得有关如何保护自己免受网络威胁的有用信息。
178 89
|
1天前
|
存储 监控 安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【9月更文挑战第9天】在数字化时代,网络安全和信息安全已成为我们生活的重要组成部分。本文将探讨网络安全漏洞、加密技术以及安全意识的重要性,并提供一些实用的知识和技巧来保护您的个人信息和数据安全。我们将通过深入浅出的方式,帮助您了解网络威胁的来源,如何利用加密技术保护自己的数据,以及如何提高自己的安全意识。无论您是个人用户还是企业,这些知识都将对您有所帮助。让我们一起来学习如何保护自己的网络安全吧!
|
1天前
|
安全 网络协议 网络安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【9月更文挑战第9天】在数字时代,网络安全和信息安全成为了全球关注的焦点。本文将深入探讨网络安全漏洞、加密技术以及安全意识等方面的内容,帮助读者更好地了解这些概念,并提高自身的网络安全意识和技能。