基于单目视觉的机器人目标跟随系统研究与实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:rosy888888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人目标跟随作为一项涉及机器人运动控制、计算机视觉、传感器融合、机器学习等技术领域的系统性学科技术,在机器人导航定位、人机交互、无人驾驶、灾害救援等领域有极大的研究价值和广阔的应用前景。基于视觉的目标跟随机器人不仅能够适应复杂多变的环境,而且其视角范围广、可视距离远,识别目标的准确率通常远远高于激光雷达传感器。因此,研究基于视觉的目标跟随机器人具有重要而深远的意义。本文总结归纳了基于激光雷达以及各种视觉传感器的目标跟随系统的优缺点,在阐述相机模型、基于深度学习的目标跟踪算法和场景分割算法、A*寻路算法的基础上,详细介绍了基于单目摄像头的机器人目标跟随系统的实现,包括通过单目相机实现目标的精确定位,利用深度学习方法改进和提高机器人远距离目标跟踪和场景识别的能力,通过在极坐标下构建局部地形图,改进并优化基于A星算法的寻路策略,提升了机器人的跟随效率以及对复杂环境的处理能力。本文主要开展了以下工作:(1)在对现有CNN网络模型和算法深入对比研究的基础上,实现并优化了基于GOTURN模型的目标跟踪算法,是的目标跟踪能够实时运行;构建了基于SegNet的卷积神经网络模型用于场景语义分割,手动采集和标定环境数据,增加训练数据规模,并将场景分割模型重新训练,提升语义分割模型分割精度和效率。(2)针对单目相机无法计算像素点空间坐标而导致的无法构建栅格地图的问题,本文提出用目标在世界平面的投影来表示其空间位置,并将所有像素点投影到同一个世界平面下,通过迭代优化的方法计算相机在世界平面的单应,并分解出相机的内外参数,进而计算出像素坐标在世界平面的2D投影,建立图像坐标与实际世界平面坐标的映射关系,最终实现单相机下的目标精确定位。(3)将改进优化的目标跟踪算法以及目标定位算法融合,在大范围内实现对目标的远距离跟随;为了提升机器人跟随效率、降低系统的复杂度,本文提出将欧氏坐标转到极坐标下,完成极坐标下栅格地图的构建;然后将语义分割结果以及目标位置映射到极坐标下的栅格地图中,规划出机器人到目标的最优路径。通过在复杂室内环境以及室外走廊的现场实验,验证了基于单目视觉的机器人目标跟随系统的实时性和有效性。
其他文献
工业自动控制的迅速发展使DCS(集散控制系统)在石化、电力等诸多行业的应用非常广泛。化工生产过程涉及到种类繁多的检测控制仪表,如温度传感器、压力变送器、控制阀、流量计等,
长江上游控制河段船舶受信号台控制,并根据通行信号有序通行。信号台信号员通过判断船舶的船位,依据控制河段的通行原则进行信号揭示,指挥船舶通行。为了适应长江航运中船舶大型
相对于轮式和履带式机器人,腿足式机器人因为其灵活的移动方式而受到研究人员的关注。在腿足式机器人中,相对于单足和双足机器人,四足机器人运动时稳定性较好,相对于六足及更
21世纪是人工智能与机器人技术取得重大发展的时代,信息化、智能化已经成为社会发展的趋势,各种智能产品走进了人们生活的各个方面。随着人们对高品质生活的追求,服务机器人
随着机械自动化水平的提高,工业机械手应用越来越广,并联机械手是一种具有精度高、惯性小、误差小等一系列优点的全新机械手,具有广阔的应用前景。本课题设计了基于OMRON公司
我国水泥工业的发展非常迅速,从上个世纪八十年代中期,我国的水泥产量一直位居世界第一。2013年成品水泥总产量更是达到24.1亿吨,占世界水泥总产量的50%以上,但是我国水泥质量合
全球能源与环境危机使得新能源汽车取代传统燃油汽车成为必然的趋势,然而车载动力电池的成本与使用安全问题目前仍然是限制电动汽车技术发展与应用的最大阻碍。电池管理系统(
生物质气化技术是实现生物质能高效利用的重要方式之一,然而燃气焦油及污染物的存在制约着气化燃气的推广应用。目前国内外针对生物质气化燃气焦油及污染物净化方面的研究多集中在净化工艺、催化剂特性、试验方法等领域,而从优化控制角度对生物质气化燃气焦油及污染物脱除过程的分析研究较为缺乏。鉴于此,本文在对生物质气化燃气焦油及污染物脱除过程特性、影响因素、脱除工艺方法全面分析总结的基础上,设计了生物质气化燃气焦油
工业机器人作为一种先进的生产工具,正被广泛应用于产品生产、设备安装、机械制造、凿岩采矿等诸多领域。工业机器人的应用研究、功能开发受到企业与科研人员的关注,是当前热
该文对太阳能集热系统中储热油罐容量的极值搜寻(ES)进行研究。通过建立储热系统的动态数学模型,设计储热油罐容量的ES问题,运用数值优化方法求解ES问题。结合太阳能物理基础,建立