视频分割--Learning to Segment Instances in Videos with Spatial Propagation Network

Learning to Segment Instances in Videos with Spatial Propagation Network CVPRW2017 https://github.com/JingchunCheng/Seg-with-SPN

本文针对视频中多目标运动物体分割问题,instance-level object segmentation 提出使用 CNN 网络分三个步骤来解决:前景分割、物体类别识别、分割精细化

3.1. Foreground Segmentation 这里采用类似 FCN 分割框架,采用 ResNet-101 模型,主要的改进:1)去掉全连接层,2)融合多尺度卷积层信息

3.2. Instance-level Recognition 有了前景分割的结果,我们分割出每个物体,further segment instance-level objects,采用的网络和损失函数类似前景分割的网络

4 Mask Refinement 这里我们做了两个步骤的Refinement 1)Spatial Propagation Network 这个网络主要用于学习 affinity entities,The coarse mask is refined under the guidance of the affinity, the learned pairwise relations, for any pairs of pixels.

2)Connected Region-aware Filter 这一步主要 considering temporal information in other frames,the consistency between two frames and helps rectify some instance confusions

5 Experiments

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器学习、深度学习

目标检测--Light-Head R-CNN: In Defense of Two-Stage Object Detector

Light-Head R-CNN: In Defense of Two-Stage Object Detector Code will be make pu...

3789
来自专栏Petrichor的专栏

Image Segmentation(图像分割)综述

583
来自专栏TEG云端专业号的专栏

图片相似性匹配中的特征提取方法综述

stevenmiao(苗捷),2016年7月博士毕业于华南理工大学,应届毕业加入TEG信息安全部。八年计算机视觉算法经验,博士期间主要研究面向视频的特征提取和内...

5299
来自专栏CVer

[计算机视觉论文速递] 2018-06-13 图像分割专场

这篇文章有4篇论文速递,都是图像分割(image segmentation)方向,其实3篇是对U-Net网络进行了改进。

1165
来自专栏应用案例

从传统方法到深度学习,人脸关键点检测方法综述

人脸关键点检测是人脸识别和分析领域中的关键一步,它是诸如自动人脸识别、表情分析、三维人脸重建及三维动画等其它人脸相关问题的前提和突破口。近些年来,深度学习方法由...

6538
来自专栏机器学习、深度学习

车辆计数--FCN-rLSTM: Deep Spatio-Temporal Neural Networks for Vehicle Counting in City Cameras

FCN-rLSTM: Deep Spatio-Temporal Neural Networks for Vehicle Counting in City Cam...

22310
来自专栏机器学习、深度学习

卫星图像中的车辆分析--A Large Contextual Dataset for Classification, Detection and Counting of Cars

A Large Contextual Dataset for Classification, Detection and Counting of Cars wi...

2289
来自专栏云时之间

深度学习与TensorFlow:FCN论文翻译

这篇论文跟上一篇的VGG论文一样,在深度学习领域同样的经典,在2015年的CVPR,该论文拿到了best paper候选的论文,在之后的PASCAL VOC20...

2602
来自专栏机器学习与自然语言处理

Stanford机器学习笔记-2.Logistic Regression

Content: 2 Logistic Regression.    2.1 Classification.    2.2 Hypothesis represe...

1808
来自专栏Petrichor的专栏

论文阅读: Faster R-CNN

RP原本主要用SS (Selective Search) 来生成,只能在CPU上跑。一张图片生成~2,000个proposal,效率0.5fps,实在太慢。 ...

703

扫码关注云+社区