Bounding Box Regression超详解(全站最全汇总版)综合各个途径文档 看这一篇就够了 解决你所有疑惑

简介: Bounding Box Regression超详解(全站最全汇总版)综合各个途径文档 看这一篇就够了 解决你所有疑惑

0.回顾一下RCNN


大家一般都是从RCNN开始了解Bounding Box Regression的,所以这里简单回顾一下RCNN

RCNN算法流程可分为4步:

1.一整图像生成1K~2K个候选区域(使用Selective Search方法)

2.对每个候选框区域使用深度网络提取特征

3.特征送入每一类的SVM分类器,判别是否属于该类

4.使用回归器精细修正候选框位置

image.png

image.png

image.png

image.png

image.png

image.png

image.png

这里我要说的就是RCNN的第四步,即“边界框回归”

主要围绕着这六个问题来解析Bounding Box Regression:

1.为什么要边框回归?

2.什么是边框回归?

3.边框回归细节

4.为什么使用相对坐标差?

5.为什么宽高比只能取对数?

6.为什么IoU较大时边界框回归可视为线性变换?

1.为什么要边框回归?


image.png

对于上图,绿色的框表示Ground Truth, 红色的框为Selective Search提取的Region Proposal。那么即便红色的框被分类器识别为飞机,但是由于红色的框定位不准(IoU<0.5), 那么这张图相当于没有正确的检测出飞机。 如果我们能对红色的框进行微调, 使得经过微调后的窗口跟Ground Truth 更接近, 这样岂不是定位会更准确。 确实,Bounding-box regression 就是用来微调这个窗口的。

2.边框回归是什么?


对于窗口一般使用四维向量 ( x , y , w , h ) (x,y,w,h)(x,y,w,h)来表示, 分别表示窗口的中心点坐标和宽高。 对于图 2, 红色的框 P 代表原始的Proposal, 绿色的框 G 代表目标的 Ground Truth, 我们的目标是寻找一种关系使得输入原始的窗口 P 经过映射得到一个跟真实窗口 G 更接近的回归窗口G ^ \widehat{G}

G 。

image.png



3.边框回归细节


RCNN论文里指出,边界框回归是利用平移变换和尺度变换来实现映射 。

image.png

image.png

注意:当输入的Proposal 与 Ground Truth 相差较小时(RCNN设置的是IOU>0.6)可以认为这种变换是一种线性变换,那么我们就可以用线性回归模型对窗口进行微调,只有当Proposal和Ground Truth比较接近时(线性问题),我们才能将其作为训练样本训练我们的线性回归模型,否则会导致训练的回归模型不work(当Proposal跟Ground Truth离得较远,就是复杂的非线性问题了,此时用线性回归建模显然不合理)。这个也是G-CNN: an Iterative Grid Based Object Detector多次迭代实现目标准确定位的关键。

那么什么是线性回归?

线性回归就是给定输入的特征向量 X, 学习一组参数 W, 使得经过线性回归后的值跟真实值 Y(Ground Truth)非常接近.,即Y≈WX

那么这个映射关系中我们的输入以及输出分别是什么呢?

image.png

image.png

image.png

4.为什么使用相对坐标差?


一句话概括:进行尺度归一化。 一句话概括:进行尺度归一化。一句话概括:进行尺度归一化。

image.png

image.png

5.式(4)为什么宽高比要取对数(为什么不直接使用宽高比值来作为目标进行学习)?


一句话概括:保证缩放尺度的非负性。 一句话概括:保证缩放尺度的非负性。一句话概括:保证缩放尺度的非负性。

要得到一个放缩的尺度,这里必须限制尺度大于0。那么,我们学习的image.png

怎么保证满足大0呢?

最直观的想法就是引入EXP函数,如公式(4)所示,那么反过来推导就是Log函数的来源了。

6.为什么IoU较大时边界框回归可视为线性变换?


image.png

本文参考多篇文章、视频、论文、汇总而成

关于RCNN中Bounding-box regression的个人理解

CSDN

CSDn

知乎

BiliBili

有问题欢迎大家指正,如果感觉有帮助的话请点赞支持下👍📖🌟

相关文章
|
机器学习/深度学习 人工智能 自然语言处理
一文尽览 | 开放世界目标检测的近期工作及简析!(基于Captioning/CLIP/伪标签/Prompt)(上)
人类通过自然监督,即探索视觉世界和倾听他人描述情况,学会了毫不费力地识别和定位物体。我们人类对视觉模式的终身学习,并将其与口语词汇联系起来,从而形成了丰富的视觉和语义词汇,不仅可以用于检测物体,还可以用于其他任务,如描述物体和推理其属性和可见性。人类的这种学习模式为我们实现开放世界的目标检测提供了一个可以学习的角度。
一文尽览 | 开放世界目标检测的近期工作及简析!(基于Captioning/CLIP/伪标签/Prompt)(上)
|
3月前
|
自然语言处理 前端开发 JavaScript
前端进阶必读:JS闭包深度解析,掌握这一特性,你的代码将焕然一新!
【8月更文挑战第23天】闭包是JavaScript的一项高级功能,让函数能够访问和操作外部函数作用域中的变量。本文深入解析闭包概念、组成及应用场景。闭包由函数及其词法环境构成,通过在一个函数内定义另一个函数来创建。它有助于封装私有变量、维持状态和动态生成函数。然而,不当使用闭包可能导致内存泄漏或性能问题。掌握闭包对于实现模块化代码和成为优秀前端开发者至关重要。
40 0
|
6月前
|
前端开发
【针对游戏开发&CG制作的搬砖人员的资源搜索技巧分享—持续补充篇】
【针对游戏开发&CG制作的搬砖人员的资源搜索技巧分享—持续补充篇】
|
6月前
|
SEO
技术写作:漏斗内容策略、认知博客、支柱内容、研究报告、通用门控内容、电子书和教程
顶部漏斗是指客户旅程中的认知阶段,他们第一次接触到企业或产品。在这个阶段,他们意识到自己存在问题,并开始寻找信息或解决方案。此阶段的内容旨在通过提供与他们的问题相关的解决方案或有价值的信息来吸引潜在客户的注意力和兴趣。这种内容通常是广泛而丰富的,而不是针对产品的。其目的是在建立信任和品牌权威的同时,告知和教育受众。
102 5
|
测试技术
《游戏测试》经典BUG解析001--002
《游戏测试》经典BUG解析001--002
|
数据挖掘 API 数据安全/隐私保护
广告收益类游戏开发源码规则解析
广告收益类游戏开发源码规则解析
|
前端开发
前端知识学习案例22-code sand box线上编码平台
前端知识学习案例22-code sand box线上编码平台
86 0
前端知识学习案例22-code sand box线上编码平台
|
机器学习/深度学习 人工智能 自动驾驶
一文尽览 | 开放世界目标检测的近期工作及简析!(基于Captioning/CLIP/伪标签/Prompt)(下)
人类通过自然监督,即探索视觉世界和倾听他人描述情况,学会了毫不费力地识别和定位物体。我们人类对视觉模式的终身学习,并将其与口语词汇联系起来,从而形成了丰富的视觉和语义词汇,不仅可以用于检测物体,还可以用于其他任务,如描述物体和推理其属性和可见性。人类的这种学习模式为我们实现开放世界的目标检测提供了一个可以学习的角度。
一文尽览 | 开放世界目标检测的近期工作及简析!(基于Captioning/CLIP/伪标签/Prompt)(下)
|
数据采集 消息中间件 分布式计算
最终整体回顾总结(代码-预处理及爬虫识别)|学习笔记
快速学习最终整体回顾总结(代码-预处理及爬虫识别)
122 0
最终整体回顾总结(代码-预处理及爬虫识别)|学习笔记