视频目标检测跟踪--Detect to Track and Track to Detect

Detect to Track and Track to Detect ICCV2017 https://github.com/feichtenhofer/detect-track ​​​​

本文针对视频目标检测问题提出一个统一的框架同时完成检测和跟踪 In this paper we propose a unified approach to tackle the problem of object detection in realistic video

ImageNet video object detection challenge (VID) 这个竞赛目前影响力是比较大

视频目标检测难度比较大,主要有以下几个原因: (i) size 视频的数据量比较大 VID has around 1.3M images, compared to around 400K in DET or 100K in COCO (ii)motion blur: 因为相机或物体运动导致的图像运动模糊 due to rapid camera or object motion (iii) quality 网络视频的质量是参差不齐的 (iv) partial occlusion 有时遮挡是比较严重的 (v) pose: unconventional object-to-camera poses are frequently seen in video 姿态的多样性

3 D&T Approach Detect and Track (D&T) 3.1. D&T overview We aim at jointly detecting and tracking (D&T) objects in video 我们是基于 R-FCN 检测框架,extend it for multi-frame detection and tracking

总体网络结构如下所示:

最大的亮点是 提出了 一个 RoI Tracking,这个模块将两帧直接的物体关联起来,完成物体跟踪 We compute correlation maps for all positions in a feature map and let RoI pooling operate on these feature maps for track regression

Performance comparison on the ImageNet VID validation set

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏媒矿工厂

HDR质量评价技术

本文聚焦HDR质量评价技术,对于编解码、色调映射以及逆色调映射等不同任务,通常会采取不同的评价方法。本部分先从主观评价和客观评价两个角度对常用的HDR视觉质量评...

2073
来自专栏BestSDK

5年时间,目标跟踪算法的进化史

第一部分:目标跟踪速览 先跟几个SOTA的tracker混个脸熟,大概了解一下目标跟踪这个方向都有些什么。一切要从2013年的那个数据库说起。。如果你问别人近几...

5096
来自专栏媒矿工厂

【AI视频编码】IEEE ISCAS2018 相关研究进展

ISCAS 2018于2018年5月26日到5月30日在意大利佛罗伦萨举行,会议主题为Art of Circuits and Systems,与佛罗伦萨-欧洲文...

1752
来自专栏欧阳大哥的轮子

地图开发知识之-投影坐标

由于地球是一个赤道略宽两极略扁的不规则的梨形球体,表面是一个不可展平的曲面,而地图通常是二维平面,因此在地图制图时首先要考虑把曲面转化成平面。然而,从几何意义上...

773
来自专栏AI科技大本营的专栏

程序员想搞机器学习?看看Nodejs之父这一年摸爬滚打的心路历程

本文是Nodejs之父Ryan Dahl在Google Brain做了一年深度学习后的心得体会,他在那里的目标是用机器学习将卓别林的老电影自动修改到4K画质。他...

4147
来自专栏大数据挖掘DT机器学习

【Keras】基于SegNet和U-Net的遥感图像语义分割

上两个月参加了个比赛,做的是对遥感高清图像做语义分割,美其名曰“天空之眼”。这两周数据挖掘课期末project我们组选的课题也是遥感图像的语义分割,所以刚好又把...

1.1K6
来自专栏鸿的学习笔记

Understanding Convolution in Deep Learning(二)

我们现在有一个非常好的直觉,卷积是什么,以及卷积网中发生了什么,为什么卷积网络是如此强大。 但我们可以深入了解卷积运算中真正发生的事情。我们将看到计算卷积的原始...

642
来自专栏Pytorch实践

Beam Search

2224
来自专栏新智元

AlphaGo 团队最新研究:作为序列学习的生成模型(22ppt)

【新智元导读】本文是 Google DeepMind 研究科学家 Nal Kalchbrenner 在 NIPS 2016 RNNSymposium 上的演讲 ...

2473
来自专栏人工智能

关于提高机器学习性能的妙招

这里有可以让你做出更好预测的32个建议、诀窍与技巧。

2077

扫码关注云+社区