人群计数--Single-Image Crowd Counting via Multi-Column Convolutional Neural Network

Single-Image Crowd Counting via Multi-Column Convolutional Neural Network CVPR2016 https://github.com/svishwa/crowdcount-mcnn https://github.com/leeyeehoo/Reduplication-of-Single-Image-Crowd-Counting-via-MCNN-on-UCF-Dataset

对图像和视频中的人数进行精确估计在公共安全中存在着实际需求。2015年上海发生的踩踏事件很直接的说明了实时人群计数的重要性。 针对该问题,首先回顾了一下传统算法的主要发展历程。最后说了一下使用CNN解决这个问题的文献。

针对基于单张图像人群计数的问题,主要面临如下三个挑战: 1)前景分割对于大多数人群计数算法是必不可少的步骤,但是前景分割本身就是一个很难的问题,目前还没有有效的解决方法。所以我们的计数算法必须不需要前景分割 2)实际图像中人群密度和分布的明显变化及图像中严重的遮挡 导致传统基于检测的算法不能很好的对这些图像进行计数 3)我们需要将图像中不同尺度的特征综合利用

本文的贡献有如下三点: 1)使用了一个 multi-column 架构 对用不同感受野尺寸,可以处理大的 variation 2)MCNN 采用全卷积网络,输入可以是任意尺寸 3)我们建了一个新的数据库 Shanghaitech,包括 Part A and Part B

2 Multi-column CNN for Crowd Counting 2.1. Density map based crowd counting 使用CNN对输入图像进行人数统计有两种策略:1)输入图像,输出人数估计 the estimated head count,2)输出一个人群密度估计图,然后通过积分得到人数。这里我们选择第二个策略,原因如下: 1)密度图保留更多的信息,相对于一个数值,密度图给出了人群在图像中的空间分布信息,可以进行局部区域的分析。 2)学习密度图的CNN中的滤波器能够更好的适应多尺寸的人头。

2.2. Density map via geometry-adaptive kernels 这里首先来介绍怎么从有人头标记的图像得到人群密度图。 如果一个像素 x 属于一个人头,那么我们使用一个 delta function 来表示,图像中N个人头数可以用 N个 delta function 求和函数 H(x) 表示。为了将 H(x) 转变为 连续的密度函数,我们使用一个高斯核 G 和 H(x) 进行卷积F(x) = H(x) ∗ G σ (x),这么做有个前提假设就是每个 x 都是独立的,但实际不是如此。 to accurately estimate the crowd density F, we need to take into account the distortion caused by the homography between the ground plane and the image plane

这里我们主要通过设计高斯核中合适的 方差来解决这个问题。 we should determine the spread parameter σ based on the size of the head for each person within the image

图像密度图实例

2.3. Multi-column CNN for density map estimation 针对图像中人头尺寸的多样性,我们设计了不同尺寸的滤波器来提取不同尺度的特征信息

损失函数定义如下:

各个数据库的比较

估计的密度图和真值密度图对比:

Comparing performances of different methods on Shanghaitech dataset

UCF CC 50 dataset

UCSD dataset

the WorldExpo’10 crowd counting dataset

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏AI研习社

Facebook 最新论文:Mask R-CNN实例分割通用框架,检测,分割和特征点定位一次搞定(多图)

对Facebook而言,想要提高用户体验,就得在图像识别上做足功夫。 AI 研习社此前报道《Facebook AML实验室负责人:将AI技术落地的N种方法》(上...

3428
来自专栏人工智能头条

从FPN到Mask R-CNN,一文告诉你Facebook的计算机视觉有多强

1203
来自专栏CVer

[计算机视觉论文速递] 2018-03-06

通知:此推文有12篇论文速递信息,涉及目标检测、实例分割、特征描述、姿态估计和GAN等方向。 PS:由于今天小编出差,坐8个多小时的高铁,所以整理文章较为匆...

4009
来自专栏专知

【干货】Lossless Triplet Loss: 一种高效的Siamese网络损失函数

【导读】本文是数据科学家Marc-Olivier Arsenault撰写的一篇博文,主要讲解了在Siamese网络中使用Lossless Triplet Los...

3866
来自专栏磐创AI技术团队的专栏

基于深度学习的计算机视觉应用之目标检测

目标检测作为图像处理和计算机视觉领域中的经典课题,在交通监控、图像检索、人机交互等方面有着广泛的应用。它旨在一个静态图像(或动态视频)中检测出人们感兴趣的目标对...

3347
来自专栏目标检测和深度学习

业界 | 一文概览2017年Facebook AI Research的计算机视觉研究进展

选自skrish13 作者:Krish 参与:路雪、刘晓坤 本文概述了 2017年Facebook AI 研究院(FAIR)在计算机视觉上的研究进展,包括基础构...

2739
来自专栏机器学习、深度学习

人车密度估计--Towards perspective-free object counting with deep learning

Towards perspective-free object counting with deep learning ECCV2016 https:...

19710
来自专栏技术随笔

[译] Every Filter Extracts A Specific Texture In Convolutional Neural Networks

2707
来自专栏机器之心

业界 | 一文概览2017年Facebook AI Research的计算机视觉研究进展

选自skrish13 作者:Krish 机器之心编译 参与:路雪、刘晓坤 本文概述了 2017年Facebook AI 研究院(FAIR)在计算机视觉上的研究进...

3065
来自专栏目标检测和深度学习

干货 | 目标检测入门,看这篇就够了(上)

作者 | 李家丞( 同济大学数学系本科在读,现格灵深瞳算法部实习生) 近年来,深度学习模型逐渐取代传统机器视觉方法而成为目标检测领域的主流算法,本系列文章将回顾...

31711

扫码关注云+社区