EAO-SLAM: Monocular Semi-Dense Object SLAM Based on Ensemble Data Association

EAO-SLAM: Monocular Semi-Dense Object SLAM Based on Ensemble Data Association

EAO-SLAM:集成数据关联的单目半稠密物体级SLAM

在这里插入图片描述

类别：单目半稠密Object SLAM

代码：基于ORB-SLAM2，待开源https://github.com/yanmin-wu/EAO-SLAM

摘要： 物体级别（Object-level）数据关联和位姿估计在语义SLAM中有重要的作用，至今由于缺少鲁棒和精准的算法还没有解决。本篇论文工作提出一种集成数据关联策略来融合参数和非参数的统计检验，极大地提高数据关联的鲁棒性和精确度。 除此之外该文章提出了可剔除外点的物体中心点、尺度估计和物体位姿初始化算法的物体位姿估计框架来提高估计的结果。 基于以上，该论文提出了一个单目SLAM系统可以建立半稠密地图以及只有物体的轻量地图。经过在三个公开数据集上测试运行，该方法在精度和鲁棒性上极大地优于现有的方法。

解决的问题：

1. 数据关联（使用带参数和无参数的统计检验一起关联数据）
2. 物体建模（孤立森林和线来感知物体的位置，大小以及朝向角度）
3. 地图表示（使用曲面椭圆和立方体建立物体地图 ）

SLAM系统介绍

系统框架

在这里插入图片描述

绿色的语义线程输入图像，使用YOLOv3检测物体，为算法提供bounding box以及label。该论文的主要贡献用红色显示在跟踪线程中：本文提出的数据关联算法将bounding box，语义标签以及tracking过程中的三维点云作为输入，之后使用孤立森林清除outlier为优化找到精准的初始化。之后物体位姿，尺度以及相机位姿一起优化建立轻量的物体地图。最终，物体地图和半稠密地图一起可以得到半稠密语义地图。

数据关联

在这里插入图片描述

无参数检验如图3(a)所示，绿色点为物体点云，使用Wilcoxon Rank-Sum test判断两组点云分布是否一致确定一帧图两点云是否属于同一物体。通过物体的中心点，单样本T检验用于判断一帧上的点云是否属于之前观察到的某个物体，双样本的T检验判断观察到的两个物体是否需要合并。

Object SLAM

物体由带尺度

的椭圆和立方体表示，在slam中需要估计它们的平移

以及朝向

。假设物体平行地面放置，可减少椭圆和立方体需要估计的参数。分别使用孤立森林计算质心，尺度（文中算法1）以及物体位姿估计算法（文中算法2）计算角度 。 该SLAM框架使用误差方程

来一起优化物体和相机位姿，其中

为角度误差，

为尺度误差（立方体投影线段和距离它最近的平行LSD Segment距离），

为传统SLAM的重投影误差。

结果

一下为该算法的结果，可以看出相比ORB-SLAM的稀疏地图，该算法更加稠密，相比稠密SLAM算法结果，该算法有输出语义物体地图，在TUM，MicroSoft RGB-D以及Scenes V2数据集上取得效果不错，在真实场景中一样可以得到以上结果，甚至被遮挡物体可以准确估计，验证了算法的鲁棒和准确性。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述