基于孪生卷积神经网络的目标跟踪算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:wxjct
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,目标跟踪技术已成为计算机视觉领域的研究热点之一。基于孪生卷积神经网络的目标跟踪算法自被提出以来,就以兼顾速度与精度的优势吸引了大批研究者的关注。与此同时,该类算法仍面临诸多挑战,当实际环境较复杂时,易出现跟踪漂移或失败的现象。为进一步改善算法在不同挑战因素下的准确性,本文首先对算法的模板设置与搜索范围选取策略进行改进,提升了算法在快速运动、背景相似场景下的精确度。然而由于单特征提取网络结构的泛化能力不足,使得算法在其它部分挑战因素中性能提升有限,因此本文随后提出一种在线选择的多分支模型,算法在运动模糊、光照变化等复杂场景具有较好的稳定性。本文研究成果和主要贡献如下:1、提出一种基于光流预测的孪生卷积跟踪算法。目前主流孪生卷积算法以第一帧目标为模板,当目标外观在后续帧改变时,易发生漂移现象;并且,以上一帧目标为中心选取当前帧的搜索范围,对目标瞬时长位移场景不鲁棒。为此,本文分别对模板与搜索范围的选取做了以下改进:首先,提出一种模板更新机制,在线学习外观转换参数矩阵,使其与模板特征图循环卷积的结果与上一帧目标特征图近似,用正则线性回归对该过程建模,并将其转换到频域求解。其次,提出光流运动信息预测模块,利用光流网络估计目标在相邻帧之间的相对运动趋势,根据预测结果选择该帧搜索范围,使得目标靠近搜索中心,降低余弦窗口对响应图惩罚不均衡的影响。为证明所提模板更新机制与光流运动信息预测模块的性能,将本算法与其他算法在公开数据集上进行对比。实验结果表明,本算法相比于基础算法Siam Fc,在快速运动场景上精确度提升4.1%,在背景相似场景上精确度提升10.0%。算法在快速运动、背景干扰、非刚性形变等情形具有良好的性能。2、提出一种基于多分支在线选择的孪生卷积跟踪算法。目前主流孪生卷积算法使用单一匹配函数,且不对其在线更新,导致算法泛化能力差,无法有效表征部分场景的目标特征。针对该问题,本文使用多分支结构进行改进,分支共分三部分:第一部分为普通分支,其结构与Siam Fc算法一致;第二部分为多样性分支群,其中包括10个垂类分支,每个分支使用ILSVRC-2015数据集预训练后,再用训练集聚类后的数据微调,使每个分支具有特定场景的表征能力,其中微调使用“三联一组”的训练策略;第三部分为Res Net分支,该分支采用分类任务预训练网络,特征提取部分基于18层的Res Net结构进行调整,同时加入特征融合机制以避免因网络加深而导致跟踪精度下降的问题。在线跟踪时,选择响应图区分度最大的分支来跟踪,并以8帧为间隔重新选取分支。为证明多分支网络结构中各分支的作用,首先进行消融实验,结果表明每个分支均改善了所提算法的性能。随后在OTB平台上与其他主流算法进行对比,实验结果表明本算法可有效应对运动模糊、光照变化等复杂场景。
其他文献
学位
“扬州八怪”的群体中,汪士慎及其艺术颇具典型性的研究价值。他博智多学,在诗书画印各方面皆有建树,艺品与人品均深受同行的高度肯定。在“康乾盛世”的大背景下,扬州的艺术格局充分职业化,汪士慎与“扬州八怪”诸家一样迈入市场,作品以饱含“冷香”之气著称,为扬州画坛增添了异样色彩。然在“扬州八怪”的相关研究中,后世更多关注于金农、郑燮等人,而忽略了这位全能之才。本文以汪士慎为研究个案,通过对汪士慎相关资料的
滴灌可以结合施肥,具有节水,省工以及提高肥效等优点,已被广泛应用于生产实践中。水肥一体化滴灌系统运行过程中,部分土壤原有养分会溶解到土壤水中,与随水施入的肥料一起运移;目前滴灌水分运动规律及溶质运移研究方面成果丰富,但水肥一体化滴灌过程中,土壤本底值将会影响土壤水中溶质含量及其运移规律,因此很有必要对随水施肥土壤水肥运移规律及影响因素进行研究,为确定适宜的施肥量提供指导。本文通过土柱入渗试验,试验
全球变暖及气候变化带来的一系列气候环境灾害成为环境学和生态学以及气候学领域学者广泛关注的问题。其中,部分地区出现的极端干旱,暴雨洪涝灾害,所带来的社会问题和生态环境问题,已经不容忽视。植被作为生产者是陆地生态系统中的重要组成,能够反映全球生态环境变化。不管是在国内还是国外,对植被变化及其与气候变化的研究主要集中在对气候变化相对敏感的区域。本研究是在全球气候变化趋势下,选取该地区进行植被覆盖变化及气
研究目的:泻白散作为国家公布的百首经典名方之一,其复方制剂研发逐渐成为热潮。经典名方研发首先应从中医理论与临床实际出发,夯实理论基础,基于以上思考,本研究采用溯源法和文献计量学方法分别从方药两大方面对泻白散进行考证解读,为未来进一步开展本方相关研发工作提供详实的文献依据。研究内容:本文主要分为三部分。第一部分为基于古今文献对泻白散全方病机功效、方义衍变、临床主治病证等方面进行分析。第二部分为本草考
学位
目的:分别随访接受经典垂直双蒂法和内侧蒂直线短瘢痕法巨乳缩小术的32例乳房肥大症患者,比较两种术式患者的症状改善情况、乳房形态、切口瘢痕、乳头乳晕感觉及泌乳功能,评估内侧蒂直线短瘢痕法治疗乳房肥大症的临床效果,判断该方法是否具有推广价值。方法:排除患者年龄、生育情况、乳房肥大程度、伴随症状、术者、术后处理等客观因素的干扰,将32例乳房肥大症患者随机分为两组,观察组接受内侧蒂直线短瘢痕法巨乳缩小术,
学位
进入二十一世纪以来,人类社会全面进入信息化时代,经济社会的各个方面的竞争都在加大,尤其是企业之间的竞争由原来的争夺物资资源慢慢转移到争夺人力,企业纷纷将人力资源作为企业发展成败的重要因素。越来越多的企业领导者都在加大对人力资源的掠夺,纷纷建立起现代企业人才发展战略。一方面加大了企业对于人才储备以及人才的引入投入,另外一方面,也加大了对企业内部人才的培训与开发。在企业的所有管理当中,绩效考核作为人力
本文以遗产税的基本理论视域为切入点,比较分析开征遗产税的国家的不同制度,以期进一步加强对遗产税基本理论问题的研究,从而为我国开征遗产税提供坚实的理论基础。同时结合