前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >对象分割--Instance-sensitive Fully Convolutional Networks

对象分割--Instance-sensitive Fully Convolutional Networks

作者头像
用户1148525
发布2019-05-27 19:51:28
1.6K0
发布2019-05-27 19:51:28
举报
文章被收录于专栏:机器学习、深度学习

Instance-sensitive Fully Convolutional Networks ECCV2016

Instance-sensitive 这里是什么意思了, FCN 语义分割对同一类型的对象是不区分的,Instance-sensitive 就是区分同一类型的对象。

这里写图片描述
这里写图片描述

上图 c 就是 semantic segmentation, d 是 instance segmentation

本文是在 FCN 的基础上将同一类型的对象区分开来,即修改 FCN 的框架使其可以完成 instance segmentation

3 Instance-sensitive FCNs for Segment Proposal 3.1 From FCN to Instance FCN 当图像只有一个对象时,FCN 的结果就是 instance segmentation 当图像有两个相近的同类型对象时,怎么让FCN完成 instance segmentation了?如果对于两个相近同类型对象的相近区域,where one object is conjunct the other,如果我们能够区分谁是 left instance的右边,谁是 right instance 的左边,那么我们就可以用 FCN-like score maps 得到 instances

这里写图片描述
这里写图片描述

有没有 DPM Deformable Part Models 的意思,就是使用部件组成一个对象,这样就可以将对象区分开来。

Instance-sensitive score maps 这里我们在 FCN 中引入 relative positions 信息,原始FCN 中每个输出像素是 a classifier of an object category, 本文的FCN 每个输出像素是 a classifier of relative positions of instances

original FCN [1] where each output pixel is a classifier of an object category, we propose an FCN where each output pixel is a classifier of relative positions of instances.

instance-sensitive score maps

Instance assembling module 这个模块就是将各个部件组合起来构成一个 instance

整个系统如下图所示:

这里写图片描述
这里写图片描述

这里用一个小网络得到 objectness score,用于过滤 instances, 得到 highly scored output instances

本文主要和 deep mask 做对比:

这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述

该方法的问题: 1)对象尺寸问题,需要对多尺度图像进行处理 Only a fixed-size square sliding window is used. The network is applied on multi-scale images to find object instances of different sizes.

2) 对象类别问题,需要再对 对象 进行分类得到类别信息 The approach is blind to the object categories. Only a separate “objectness” classifica- tion sub-network is used to categorize the window as object or background. For the instance-aware semantic segmentation task, a separate downstream network is used to further classify the mask proposals into object categories

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2017年05月16日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档