全局语义SLAM在异构嵌入式平台上的实时性研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:lovele
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着异构嵌入式平台计算能力的不断提升,越来越多计算机视觉方面的技术应用于嵌入式设备中。基于计算机视觉技术的即时定位与地图构建(SLAM)框架,在近几年来不断发展并成为了热门的研究话题。SLAM的一个发展方向是跟深度学习相结合,利用语义信息来提升SLAM的定位精度。但是,当前的语义SLAM通常无法在异构嵌入式平台上实现实时运算。此外,SLAM还存在一个问题,即设备定位主要相对于起始位置,无法确认在现实生活中的具体位置(即全局定位)。为了在异构嵌入式平台上实现实时的全局语义SLAM,本文设计并实现了一种针对于大范围道路场景定位的前后端系统架构,主要研究工作如下:(1)对相关的算法进行研究与对比。分析并对比了多种深度图算法,最终选择不存在空洞的DispNet算法来实现深度图的获取;测试对比了多种特征点算法的运算速度及描述子准确性,最终将兼顾实时性和准确性的CudaSIFT集成到系统中;对多种语义分割算法进行测试分析,最终选择DeepLab来实现语义功能;分析了传统SLAM的性能,并结合全局地图方法,得到了本文系统设计的灵感。(2)设计并实现了新的前后端系统架构。该系统主要包括了两部分:运行于高性能PC上的后端以及运行于异构嵌入式平台的前端。后端主要负责全局地图的离线构建,以及通过无线通信为前端提供地图信息;前端主要负责基于全局地图完成实时定位。为了解决全局地图切割所带来的诸多问题,本文还提出了双层级定位方法,该方法能够有效地定位到前端移动的初始位置,从而检索出对应范围的切割后的子地图。对于语义信息的结合,本文提出了用语义分割的方法来区分场景中的动静物体并剔除动态物体,从而解决建图与定位这两个不同时间段下动态物体不一致的情况。(3)优化与改进部分在嵌入式设备上的算法。包括了DeepLab的网络结构优化,2D-3D匹配算法的并行化加速,以及利用线程并行优化定位过程中的一些计算过程。同时,选用的算法以及优化方法均考虑到了嵌入式设备的异构特性,即充分利用嵌入式设备上的CPU/GPU资源来实现更好的系统性能。本文系统在实现后,能够在KITTI数据集上以近11帧每秒的速度完成实时定位,并且最终的定位轨迹误差维持在了1米以内,同时兼顾了实时性和准确性。
其他文献
面对消费升级,伊利坚持以品质为信条,打造品质企业,来推动乳业供给侧的结构性改革,从而实现企业的发展。
自主移动机器人被广泛应用在安保巡逻、货物运送、自动驾驶以及家庭生活等领域,提高应用效果的最重要的一个因素就是能够精确的进行路径导航,因此如何设计一种智能高效的自主移动机器人路径导航算法一直是该领域比较热门的一个研究课题。然而,已有的自主移动机器人路径导航方法大多效率低,训练成本高且研究算法鲁棒性以及泛化能力差。随着道路环境的日趋复杂,人口和建筑物等的增多,这些问题更加突出。为了突破传统自主移动机器
我国货币政策的信贷渠道在当前宏观经济调控中仍占据主导地位。资本市场的不完善和大量中小企业的存在会使得信贷渠道在今后的一段时间内继续发挥其主导作用。货币当局要有效