基于双目视觉的车辆目标检测与跟踪算法研究

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:A312685521
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在交通场景中对车辆目标进行检测与跟踪可以有效获取其位置与行驶轨迹,有利于判断司机的驾驶意图,从而对违章行为进行检测与定性,对公共交通有着重要意义。然而在实际应用中,基于单目图像的2D和3D目标检测方法无法准确估计车辆在真实环境中的位置和偏角,严重影响后续跟踪的精度;而基于激光雷达的3D目标检测方法因成本高昂无法广泛应用。为了精确描述车辆在三维空间中的行驶轨迹和转向信息,本文先将立体匹配算法获取的场景空间信息引入单目3D目标检测算法RTM3D,实现双目3D目标检测,准确的检测车辆的真实位置和角度,再将双目车辆目标检测算法和卡尔曼滤波算法相结合,把不同帧之间的相同车辆联系起来,实现3D车辆目标跟踪,并依据跟踪结果求得车辆的行驶轨迹和转向信息。本文主要研究工作如下:(1)搭建双目数据采集系统。利用张氏标定法对相机进行双目标定,准确获得了相机的内外参数和左右目投影矩阵,确保像素坐标系与世界坐标系可以进行精准的转换,为实际验证本文3D车辆目标检测与跟踪算法提供了数据支撑。(2)建立双目自注意力蒸馏3D车辆目标检测网络(Stereo Self-Attention-Distillation Net,SSnet)。首先提出损失自注意力辅助网络(Loss Self-Attention net,LSAnet)辅助立体匹配算法PSMnet进行优化,并改进了立体匹配代价卷结构,获取更高质量的场景深度信息;再将立体匹配算法获得的场景深度信息引入RTM3D中实现了双目3D目标检测算法SSnet;最后使用自注意力蒸馏策略在不增加计算量的前提下增强了网络前后特征的一致性。将改进的SSnet在KITTI3D目标检测数据集上进行验证,对简单、中等、困难车辆目标检测的准确率分别提高至80.05%、70.79%、66.04%。经过本地数据集的验证,算法较改进前可以准确识别出遮挡车辆和远距离车辆,为后续进行稳定的3D车辆目标跟踪提供了良好的基础。(3)提出SSnet和卡尔曼滤波算法结合的3D车辆跟踪方法。将SSnet检测结果引入卡尔曼滤波器进行多目标跟踪;设计新生和消亡阈值,在一定程度上克服了因检测算法漏检、误检导致跟踪不稳定的问题。在KITTI目标跟踪公开数据集进行了验证,将多目标跟踪准确率提高至81.14%。在本地数据集上进行了验证,本文算法能够在真实场景下准确、稳定的跟踪车辆目标,并可根据车辆真实位置的变化准确描绘出行进轨迹,通过车辆角度的变化判断车辆的转向信息。
其他文献
报纸
目的 分析耐多药/泛耐药气管支气管结核患者的临床特征,及在接受含抗结核新药贝达喹啉方案治疗后分析影响早期疗效的危险因素。方法 对2018年3月至2020年12月成都市公共卫生临床医疗中心治疗的耐多药/泛耐药气管支气管结核成年患者进行回顾性队列研究,收集队列中的人口学特征、既往史、个人史、合并症、胸部影像学特征、耐药情况、治疗、镜下特征及预后等临床资料,根据二线抗结核治疗8周末痰培养结核分枝杆菌是否
鄂尔多斯盆地南部黄土塬区域地表被巨厚且疏松的黄土所覆盖,地震波吸收衰减严重,地震资料有效信号能量弱、频率低、横向一致性差。Q叠前深度偏移能够按照射线路径补偿非弹性介质造成的振幅、频率损失以及相位畸变,其核心建立精确的速度建模和精确的Q建模。Q层析反演建模技术受地震资料品质、Q估算方法的影响,造成Q层析反演结果不稳定。为了能够建立精细的Q模型,本文提出一种基于构造模型约束的变网格Q层析建模方法。该方
目的:本研究通过测定成人哮喘急性发作期患者与健康对照组外周血单个核细胞中mi RNA-206的表达水平,外周血中Th17细胞数及IL-17的浓度,以及分析哮喘组mi RNA-206与Th17细胞、mi RNA-206与IL-17浓度的相关性,探讨mi RNA-206在哮喘发病中的作用及可能的机制,为哮喘的治疗提供新的思路。方法:根据纳入及排除标准收集符合条件的成人哮喘患者共30例作为实验组,同期选
目的 观察热敏灸配合浮针治疗肩周炎临床疗效。方法 选取九江市中医医院针灸科门诊收治的80例患者作为本次研究对象,随机均分为治疗组和对照组。对照组采用普通针刺疗法,治疗组采用热敏灸配合浮针疗法。比较2组治疗前后的疼痛视觉模拟(VAS)评分、Constant-Murley肩关节评分以及治疗效果。结果 治疗前,对照组和治疗组患者VAS评分差异无统计学意义(P> 0.05)。治疗后,治疗组VAS评分明显低
随着人口增加、气候变暖、农业耕地面积下降的问题愈演愈烈,中国的粮食安全正面临着巨大的挑战。为了有效调节我国粮食与供给关系,寻找如何提高作物产量的方法是解决粮食危机的有效途径之一。而作物籽粒的考查是产量的关键表达方式,同时也是育种研究和功能基因分析过程中重要的一环。籽粒的粒型参数如粒长、粒宽、粒厚、籽粒体积等也与作物的产量、基因型密切相关。研究作物籽粒3D表型特征参数的快速测量,对于如何实现亚品种间
3C电子制造业的迅猛发展,对机器人装配提出了柔性化、高精度的需求。视觉引导机械臂装配是实现小批量、多批次3C制造业柔性装配环节的重要途径。本文面向3C制造业高精度柔性装配应用需求,针对高精度视觉引导柔性装配细小螺丝的若干难题,提出双相机手眼标定新方法、基于深度约束的螺孔边缘特征提取方法、3D点云螺孔位姿和螺丝位姿解算新方法,开发手机螺丝柔性装配视觉引导系统,并通过实验验证所开发系统的功能。本文主要
我国现役桥梁数量庞大,为保证桥梁运行安全,需对桥梁进行定期检查。针对桥梁后期维护检测,传统检测方法多采用人工现场调查法,主要是外观检测,工作繁复,效率较低,且存在视觉盲点。本文探讨了无人机作为一种新型工具,用于桥梁检测的研究进展及其用于桥梁检测中存在的桥底GPS信号不佳、钢结构桥梁易干扰无人机信号传输等缺点。阐述了通过无人机倾斜摄影测量来快速建立桥梁三维模型,从而构建桥梁地图的相关技术和方法,后期
<正>本文研究慢性肾衰(CRF)患者中医典型证型与血浆内皮素(ET)、内生肌酐清除率(Ccr)、尿素氮(BUN)、血肌酐(Scr)的相关联系。方法:测定100例CRF患者各中医证型ET、Ccr、BUN、Scr,进行相互比较,并与32例健康人的相应检查项目对比分析。结果:慢性肾衰患者ET、BUN、Scr水平均明显高于健康对照组(P<0.01),Ccr水平均明显低于健康对照组(P<0.01),中医各证
会议