论文笔记:Parallel Tracking and Verifying: A Framework for Real-Time and High Accuracy Visual Tracking

简介: Parallel Tracking and Verifying: A Framework for Real-Time and High Accuracy Visual Tracking  本文目标在于 tracking performance 和 efficiency 之间达到一种平衡。

Parallel Tracking and Verifying: A Framework for Real-Time and High Accuracy Visual Tracking 

 

本文目标在于 tracking performance 和 efficiency 之间达到一种平衡。将 tracking 过程分解为两个并行但是相互协作的部分:

  一个用于快速的跟踪(fast tracking);

  另一个用于准确的验证(accurate verification)。 

  

本文的 Motivation 主要是:

  1. 大部分跟踪的序列,都是比较平坦简单的,但是存在有些非常具有挑战性的片段的存在,使得跟踪的结果不是非常的好。如果处理不好,还会导致跟踪的丢失。本文利用 verifiers 将进行这些关键点的处理。

  2. 计算机视觉当中多线程计算已经非常普遍,特别是 SLAM。By splitting tracking and mapping into two parallel threads, PTAM (parallel tracking and mapping) [23] provides one of the most popular SLAM frameworks with many important extensions.   

  3. 最近快速、准确的跟踪算法提供了有效的 building blocks,并且鼓励我们去寻找组合的解决方法(呵呵了。。。)

 

 

 

创新点:

  1. we propose to build real-time high accuracy trackers in a novel framework named parallel tracking and verifying (PTAV). 

  2. The key idea is : while T needs to run on every frame, does not. As a general framework, PTAV allows the coordination between the tracker and the verifier: V checks the
tracking results provided by T and sends feedback to V; and V adjusts itself according to the feedback when necessary. By running T and V in parallel, PTAV inherits both the high
efficiency of T and the strong discriminative power of V.

 

==========  分割线  =========

 ======== 以上是 PTAV framework 的流程图,也是两个 tracker 和 verifiers 之间互相协助的过程。 

PTAV Implementation:

1. Tracking 的过程就是利用了 fDSST 跟踪算法,没啥好说的;但是不同的是, the tracker in this paper,存储了所有的中间结果,since sending out last verification request to ensure fast tracing back. 

2. Verifying 是采用了 Siamese network。

  ==>> 当从 tracking 过程中得到的跟踪结果,如果其验证得分低于一个阈值,那么 V 就认为该跟踪结果不可靠,或者说认为已经跟踪失败了。

  此时,V 利用Siamese network,在进行一次检测。具体做法就是利用 region pooling layer 进行一次前传,然后得到许多候选的样本,然后从中选择最好的那个作为检测的结果:

  

  当有了这些检测结果之后,我们在进行一次 check,确认下检测结果是否可信? 其实就是根据检测的置信度和某一阈值进行比较,如果不符合要求,就放大搜索区域,进行再一次的搜索。 

  

 

============================= 算法部分完毕

 实验结果:

 

 想想真可怕,作者居然不辞劳苦的跑了四个数据集。。。

 

相关文章
|
2月前
|
机器学习/深度学习 测试技术 算法
文献解读-DNAscope: High accuracy small variant calling using machine learning
在这项研究中,研究组证明了DNAscope在不同样本和不同覆盖度水平下都能达到比DNAseq更高的准确性。使用GA4GH分层区域进行的分层分析,能够确认DNAscope在大多数分层区域中都具有高准确性,并突显了DNAscope在插入缺失(indels)和包含变异检测较困难的基因组区域的分层中具有更高的准确性。DNAscope结合了GATK's HaplotypeCaller中使用的成熟数学和统计模型,以及用于变异基因型分析的机器学习方法,在保持计算效率的同时实现了卓越的准确性。
40 3
文献解读-DNAscope: High accuracy small variant calling using machine learning
|
3月前
|
算法 数据挖掘 数据处理
文献解读-Sentieon DNAscope LongRead – A highly Accurate, Fast, and Efficient Pipeline for Germline Variant Calling from PacBio HiFi reads
PacBio® HiFi 测序是第一种提供经济、高精度长读数测序的技术,其平均读数长度超过 10kb,平均碱基准确率达到 99.8% 。在该研究中,研究者介绍了一种准确、高效的 DNAscope LongRead 管道,用于从 PacBio® HiFi 读数中调用胚系变异。DNAscope LongRead 是对 Sentieon 的 DNAscope 工具的修改和扩展,该工具曾获美国食品药品管理局(FDA)精密变异调用奖。
33 2
文献解读-Sentieon DNAscope LongRead – A highly Accurate, Fast, and Efficient Pipeline for Germline Variant Calling from PacBio HiFi reads
|
3月前
|
编解码 人工智能 文件存储
轻量级网络论文精度笔记(二):《YOLOv7: Trainable bag-of-freebies sets new state-of-the-art for real-time object ..》
YOLOv7是一种新的实时目标检测器,通过引入可训练的免费技术包和优化的网络架构,显著提高了检测精度,同时减少了参数和计算量。该研究还提出了新的模型重参数化和标签分配策略,有效提升了模型性能。实验结果显示,YOLOv7在速度和准确性上超越了其他目标检测器。
67 0
轻量级网络论文精度笔记(二):《YOLOv7: Trainable bag-of-freebies sets new state-of-the-art for real-time object ..》
|
人工智能 编解码 自动驾驶
YOLOv7: Trainable bag-of-freebies sets new state-of-the-art for real-time object detectors
YOLOv7在5 FPS到160 FPS的范围内,在速度和精度方面都超过了所有已知的物体检测器,在GPU V100上以30 FPS或更高的速度在所有已知的实时物体检测器中具有最高的精度56.8% AP。
475 0
《Fighting Cybercrime A Joint Task Force of Real-Time Data and Human Analytics》电子版地址
Fighting Cybercrime: A Joint Task Force of Real-Time Data and Human Analytics
88 0
《Fighting Cybercrime A Joint Task Force of Real-Time Data and Human Analytics》电子版地址
《Improving Real-Time Performance by Utilizing Cache Allocation Technology》电子版地址
Improving Real-Time Performance by Utilizing Cache Allocation Technology
89 0
《Improving Real-Time Performance by Utilizing Cache Allocation Technology》电子版地址
PAT (Advanced Level) Practice - 1145 Hashing - Average Search Time(25 分)
PAT (Advanced Level) Practice - 1145 Hashing - Average Search Time(25 分)
122 0
PAT (Advanced Level) Practice - 1118 Birds in Forest(25 分)
PAT (Advanced Level) Practice - 1118 Birds in Forest(25 分)
115 0
PAT (Advanced Level) Practice - 1122 Hamiltonian Cycle(25 分)
PAT (Advanced Level) Practice - 1122 Hamiltonian Cycle(25 分)
122 0
PAT (Advanced Level) Practice - 1004 Counting Leaves(30 分)
PAT (Advanced Level) Practice - 1004 Counting Leaves(30 分)
114 0