视频分割--Learning to Segment Instances in Videos with Spatial Propagation Network

Learning to Segment Instances in Videos with Spatial Propagation Network CVPRW2017 https://github.com/JingchunCheng/Seg-with-SPN

本文针对视频中多目标运动物体分割问题,instance-level object segmentation 提出使用 CNN 网络分三个步骤来解决:前景分割、物体类别识别、分割精细化

3.1. Foreground Segmentation 这里采用类似 FCN 分割框架,采用 ResNet-101 模型,主要的改进:1)去掉全连接层,2)融合多尺度卷积层信息

3.2. Instance-level Recognition 有了前景分割的结果,我们分割出每个物体,further segment instance-level objects,采用的网络和损失函数类似前景分割的网络

4 Mask Refinement 这里我们做了两个步骤的Refinement 1)Spatial Propagation Network 这个网络主要用于学习 affinity entities,The coarse mask is refined under the guidance of the affinity, the learned pairwise relations, for any pairs of pixels.

2)Connected Region-aware Filter 这一步主要 considering temporal information in other frames,the consistency between two frames and helps rectify some instance confusions

5 Experiments

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏专知

【论文推荐】最新5篇图像分割相关论文—条件随机场和深度特征学习、移动端网络、长期视觉定位、主动学习、主动轮廓模型、生成对抗性网络

【导读】专知内容组整理了最近五篇视觉图像分割(Image Segmentation)相关文章,为大家进行介绍,欢迎查看! 1. Conditional Rand...

4248
来自专栏计算机视觉

基于图的分割 Efficient Graph-Based Image Segmentation 论文详解

输入图片 不同参数下的分割结果 原图片 产生superpixel的方法 1. How to segment an image into regions?    ...

4038
来自专栏文武兼修ing——机器学习与IC设计

基于sklearn的线性支持向量机分类器原理代码实现

原理 分类器 机器学习的分类器,均可以看成一个或一组超平面,将label不同的数据点在数据空间中分开。对于线性可分问题,属于相同label的数据点在数据空间中可...

3749
来自专栏林德熙的博客

C# 已知点和向量,求距离的点

已知一个点 P 和向量 v ,求在这个点P按照向量 v 运行距离 d 的点 B 。

1643
来自专栏量化投资与机器学习

深度学习Matlab工具箱代码注释之cnnapplygrads.m

%%========================================================================= %...

18510
来自专栏烂笔头

机器学习笔记—KNN算法

目录[-] 前言 分类(Classification)是数据挖掘领域中的一种重要技术,它从一组已分类的训练样本中发现分类模型,将这个分类模型应用到待分类的样...

49210
来自专栏Petrichor的专栏

Image Segmentation(图像分割)综述

1853
来自专栏Bingo的深度学习杂货店

使用Keras实现生成式对抗网络GAN

生成式对抗网络(GAN)自2014年提出以来已经成为最受欢迎的生成模型。本文借鉴机器之心对 2014 GAN 论文的解读,在本机运行该Keras项目。 传送门:...

5834
来自专栏Petrichor的专栏

深度学习: translation invariant (平移不变性)

1823
来自专栏Petrichor的专栏

深度学习: Faster R-CNN 网络

网络结构有两种,一种是将ZFNet(扔掉了尾端的全连接层)拿来用,另一种则是将VGG拿来用(扔掉了尾端的全连接层)。论文中给出的是第一种(绿框内为拿来用的那部分...

2624

扫码关注云+社区