zoukankan      html  css  js  c++  java
  • EAO-SLAM: Monocular Semi-Dense Object SLAM Based on Ensemble Data Association

    EAO-SLAM: Monocular Semi-Dense Object SLAM Based on Ensemble Data Association

    EAO-SLAM:集成数据关联的单目半稠密物体级SLAM

    在这里插入图片描述
    类别:单目半稠密Object SLAM

    代码:基于ORB-SLAM2,待开源https://github.com/yanmin-wu/EAO-SLAM

    摘要:
    物体级别(Object-level)数据关联和位姿估计在语义SLAM中有重要的作用,至今由于缺少鲁棒和精准的算法还没有解决。本篇论文工作提出一种集成数据关联策略来融合参数和非参数的统计检验,极大地提高数据关联的鲁棒性和精确度。
    除此之外该文章提出了可剔除外点的物体中心点、尺度估计和物体位姿初始化算法的物体位姿估计框架来提高估计的结果。
    基于以上,该论文提出了一个单目SLAM系统可以建立半稠密地图以及只有物体的轻量地图。经过在三个公开数据集上测试运行,该方法在精度和鲁棒性上极大地优于现有的方法。

    解决的问题:

    1. 数据关联(使用带参数和无参数的统计检验一起关联数据)
    2. 物体建模(孤立森林和线来感知物体的位置,大小以及朝向角度)
    3. 地图表示(使用曲面椭圆和立方体建立物体地图 )

    SLAM系统介绍

    系统框架

    在这里插入图片描述

    绿色的语义线程输入图像,使用YOLOv3检测物体,为算法提供bounding box以及label。该论文的主要贡献用红色显示在跟踪线程中:本文提出的数据关联算法将bounding box,语义标签以及tracking过程中的三维点云作为输入,之后使用孤立森林清除outlier为优化找到精准的初始化。之后物体位姿,尺度以及相机位姿一起优化建立轻量的物体地图。最终,物体地图和半稠密地图一起可以得到半稠密语义地图。

    数据关联

    在这里插入图片描述

    无参数检验如图3(a)所示,绿色点为物体点云,使用Wilcoxon Rank-Sum test判断两组点云分布是否一致确定一帧图两点云是否属于同一物体。通过物体的中心点,单样本T检验用于判断一帧上的点云是否属于之前观察到的某个物体,双样本的T检验判断观察到的两个物体是否需要合并。

    Object SLAM

    物体由带尺度$$s$$的椭圆和立方体表示,在slam中需要估计它们的平移$$t$$以及朝向$$ heta$$。假设物体平行地面放置,可减少椭圆和立方体需要估计的参数。分别使用孤立森林计算质心,尺度(文中算法1)以及物体位姿估计算法(文中算法2)计算角度 。
    该SLAM框架使用误差方程

    [(O,Tc)^*=underset{ heta y, s}{argmin} sum_{}{(e( heta)+e(s))}+underset{Tc}{argmin} sum_{}{e(p)} ]

    来一起优化物体和相机位姿,其中$$e( heta)$$为角度误差,$$e(s)$$为尺度误差(立方体投影线段和距离它最近的平行LSD Segment距离),$$e(p)$$为传统SLAM的重投影误差。

    结果

    一下为该算法的结果,可以看出相比ORB-SLAM的稀疏地图,该算法更加稠密,相比稠密SLAM算法结果,该算法有输出语义物体地图,在TUM,MicroSoft RGB-D以及Scenes V2数据集上取得效果不错,在真实场景中一样可以得到以上结果,甚至被遮挡物体可以准确估计,验证了算法的鲁棒和准确性。

    在这里插入图片描述

    在这里插入图片描述

    在这里插入图片描述

    在这里插入图片描述
    欢迎加入公众号读者群一起和同行交流,目前有SLAM、检测分割识别、三维视觉、医学影像、GAN、自动驾驶、计算摄影、算法竞赛等微信群(以后会逐渐细分),请扫描下面微信号加群,备注:”昵称+学校/公司+研究方向“,例如:”张三 + 上海交大 + 视觉SLAM“。请按照格式备注,否则不予通过。添加成功后会根据研究方向邀请进入相关微信群。请勿在群内发送广告,否则会请出群,谢谢理解~
    投稿、合作也欢迎联系:simiter@126.com
    在这里插入图片描述

    长按关注计算机视觉life
    在这里插入图片描述

  • 相关阅读:
    大型web系统分布式架构
    与MSN聊天的PowerTalk两个示例
    PowerTalk的四个示例代码
    PowerTalk在十月份左右会有新的版本
    PowerTalk控件 制作 即时通信 聊天室 产品咨询系统 支持与MSN的控件
    PowerTalk有些对不住大家
    自动生成实体sql工具的IDEvs2005工具(源代码+程序)
    C#字符串类快速编译器
    小菜编程成长记系列
    一道简单的编程题,不过您做对了吗?
  • 原文地址:https://www.cnblogs.com/CV-life/p/13626661.html
Copyright © 2011-2022 走看看