基于深度学习的移动机器人视觉感知算法研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:afei137
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
中国是全球制造业大国,但不是制造业强国,目前我国的众多产业生产效率及生产过程自动化程度还很底,因此众多产业急需转型升级,而机器人是实现智能制造的关键。随着“中国制造2025”和“工业4.0”的提出,中国机器人也迎来了发展的黄金时期,大量资本流入机器人研发,工业机器人得到了迅猛的发展。另外近几年随着网购业务的高速发展,网购物品的快捷运达已成为提升客户购物体验的关键,利用移动机器人实现货物的自动快速搬运不仅能节约大量的人力成本,同时也能提高物品搬运的速度和安全性,而视觉系统的加入可大幅提升机器人的灵活性和抓取物品的精度。首先,本文对国内外相关的视觉技术进行了详细分析,简述了相关经典视觉算法的发展过程。其次根据机械手臂对视觉系统的具体要求,提出了一套基于深度学习的目标物体定位算法和姿态估计算法,主要包括目标物体深度图的获取,目标物体空间三维位置的确定和目标物体位置姿态的估计三个部分;利用RGBD匹配技术将由TOF相机采集到的深度图投射到彩色相机的像素坐标系下,实现了同一空间物体在两个相机坐标系下的统一。然后利用插值算法得到高分辨率的深度融合图用来估计物体在三维空间中的位置。本文使用了目标检测网络算法检测目标物体,为了适应于嵌入式平台的计算能力和内存资源,替换了网络中的经典卷积结构,并结合融合深度图优化了原始网络中的锚框机制,在不增加计算量的前提下缩小了网络模型体积,提升了网络的检测精度。为了估计目标物体的姿态,本文利用语义分割网络来识别物体表面平整的光滑平面,提取出表面的平面之后,对于物体表面进行空间建模,确定平面法向量后,得到了物体的姿态信息,可以控制机械手臂运动到物体的正上方,沿着平面的法向量方向将机械臂末端的吸嘴贴到物体表面上,从而实现机械臂对于目标物体的准确抓取。最后,本文对设计的视觉算法方案在不同环境下分别对视觉融合算法模块、目标检测算法模块和姿态估计模块进行了反复的测试,实验结果表明,本文提出的目标检测算法在数据集上能达到86.93的mAP,同时姿态估计算法具有很强的抗干扰能力,对于大部分复杂环境中的目标物体,都能正确找到其所在位置,同时能计算得到物体的最终姿态,另外采用了并行算法,一次计算时间仅需1.2s左右。
其他文献
目的:探究针药结合治疗小儿多发性抽动症(MT)的临床疗效。方法:选取149例小儿多发性抽动症患者作为研究对象,随机分为对照组(n=71)与研究组(n=78),对照组患者口服泰必利,研究组患者采
对卡特兰杂交种进行了不同温度处理,以研究温度对开花的影响。结果表明:杂种卡特兰花芽未分化期开始采用25/20℃(昼/夜温度)处理能够显著地促进开花,使盛花期提前56d,但开花
目前,传统机器人已经广泛应用于侦查、探测、救援、医疗等领域,其建模方式、驱动及控制方法等研究都已趋于成熟,但因其刚性结构、有限的自由度和操作空间使得传统机器人在某
<正> 英文“Retort Pouch Food”,日本人译成中文时,有作“丽套食品”。过去,我国有译作“蒸煮袋”食品的,显然不太确切,易与“Boil in Bag”食品相混淆,也有译作“软包装”
文章提出在英语阅读教学中采用提问法,将运用提问法的整个教学活动分为教师组织阶段、学生预测阶段、学生阅读理解阶段、学生口头表达阶段,并总结运用提问法的意义。 The ar
森林是人类赖以生存的基础,而森林文化是人类共同的文化,也是人类文化的源泉。日本是一个森林大国,拥有丰富的森林文化。本文首先介绍了日本森林的概况,然后从森林文化的起源
市场营销学起源于美国,经过多年发展,其市场营销专业本科教育体系已经非常成熟,本文通过对美国市场营销专业本科人才培养模式的探讨分析,希望能借鉴其成功之处,进一步提高我国本科
先天性胆总管羹肿的分型及特点上海医科大学华山医院外科教研室(200040)张延龄根据先天性胆总管囊肿发生在胆管的不同部位及其不同形态,可称为先天性胆管囊肿、胆管囊性扩张、胆总管囊
清朝时期的云南省干崖傣族土司刀安仁,在留学日本途中写的游记诗《游历记》,通过景物的写实性再现,以爱国兴族的满腔热情为主线,把作者内心的各种情感交织在一起,让人从欣赏
<正> 緒言在一个有源振子旁边放上一个或多个無源振子,在前者的电磁塲作用之下,無源振子上就出现了感应电流,从而产生二次輻射。二次塲叠加在一次塲上,就改变了有源扳子原有