多任务联合学习实时一体化多目标跟踪方法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:youtodown1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多目标跟踪是计算机视觉任务中最基本而又最具挑战性的任务之一,在自动驾驶、人机交互、智能监控等场景中都有着广泛的应用前景。目前主流的多目标跟踪方法可以分为两大类,即基于检测和基于单目标跟踪。前者依靠于检测器所获得的结果进行数据关联。然而,当检测结果或是匹配信息不可靠时往往会造成轨迹断裂等问题。后者虽然通过先进的单目标跟踪器单独处理每一个目标来保证轨迹的连贯性,但是跟踪效率会随着目标数的增加而急剧下降,限制其实际应用价值。虽然后续一些工作也考虑通过多模型堆叠的方式结合上述两类方法的优点,但该做法所构建的系统复杂,难以落地。为此,本文针对上述方法的局限性展开深入研究,以多任务联合学习和一体化模型构建为切入点,研究如何集合检测、外观建模和运动传播等多个任务的优势,构建一种高性能的实时一体化多目标跟踪方法。本论文的主要工作如下:(1)从多任务联合学习的角度出发,本文提出了一种检测和外观建模(re-identification,Re ID)协同互助的高性能一体化方法CSTrack。本文对检测和Re ID两个任务的本质关联和矛盾进行了深入分析,并设计了两个新颖且有效的模块,以实现两个任务更好的协同学习。一是基于任务的特征互惠模块,通过学习更好的任务依赖特征以提高任务协作。二是基于注意力机制的目标感知模块,以学习构建更有利于表征所有目标匹配语义的输出。实验证明,所提出的模块有效地提高了当前一体化方法的跟踪性能,尤其是在数据关联能力上取得了巨大的提高。(2)为了更高效地在多目标跟踪场景中实现运动传播,本文提出了一种轻量化的再查询网络,以极小的代价近实时地实现单目标跟踪增强。所提出的再查询网络灵活地扩展了ID向量的功能,使其不仅可以用于数据关联,同时可以在当前帧定位已有目标的位置,实现运动传播。该模块在显著降低融合单目标跟踪所带来的计算量的前提下,有效地提高了目标轨迹的连贯性。(3)本文整合了所提出的一体化方法CSTrack以及再查询网络,提出了一种高性能的联合检测、外观建模(Re ID)和运动传播(单目标跟踪)的一体化方法OMC。本文提出的方法在MOT Challenge的多个数据集上均取得了最先进的跟踪性能,且与现有其他代表性的方法相比取得了极大的性能优势。此外,从实际应用的角度出发,本文进一步对算法进行加速,所提出的加速版本在单张GPU上可达到35.4 FPS(帧/秒)的平均推理速度,具有极高的落地应用价值。
其他文献
数字化变革的浪潮下,伴随着网络、智能技术的推动,出版行业加速了线上线下多渠道、多业态融合发展的趋势,出版APP作为出版机构进行线上业务拓展的载体,承担着重要作用。由于受到各种主客观因素的掣肘,当下部分出版APP面临营销成果欠佳、经营困难的窘境。在创造价值的模式由传统营销向数字化营销转换的进程中,出版APP亟需以数字技术赋能营销创新,探索发展的新道路。在此背景下,本文以出版APP的营销策略为着眼点,
说明文教学高度结构化的知识体系,使得很多教师长期沿用一种套路,教学愈发僵化。说明文教学意在培养学生语言运用的能力、科学严谨的态度、科学探究的精神、批判质疑的思维和求真的人格。初中阶段的说明文教学,可通过情境的巧妙创设,进行高阶思维训练,将学习变成自我体验;教出单篇语体特色,实现多篇文本组合,将体验变成自我探究;打破思维定式,创新教学方式,将探究变成自我唤醒。语文教师若能站在课程发展的高度,关注学习
随着2013年以来股权质押规模的不断扩大、质押比例的不断提高,各界对于股权质押可能导致的公司盈余操纵行为产生了深深的担忧,而外部治理机制在其中又能起到什么作用呢?这一问题值得思考。依据股权质押业务运行机制,一旦股价降至警戒线或平仓线附近,出质人就会面临很大的控制权转移风险。而公司盈余往往对股价的影响最大。鉴于此,质押了股权的控股股东就可能会从真实盈余入手,操纵盈余,抬振股价。本文借鉴相关研究的做法
长白山火山区地壳热结构尚未建立,目前基于地球物理探测手段获得的天池火山浅部岩浆房赋存深度存在差异.通过对天池火山北坡CZK07钻孔测温情况的研究,在资料评价与地温梯度计算的基础上,结合全新世岩浆房温度资料,估算了北坡浅部岩浆房的赋存深度. CZK07钻孔位于地球物理探测所推测的浅部岩浆房正上方,靠近历史时期火山喷发火口,在孔深约610 m处地温较高且稳定(102.5~106.8℃).连续测温资料显
喀拉通克矿床为中亚造山带中典型岩浆型铜镍硫化物矿床,矿区内发育NW向褶皱及NW向、NNW向、NE向断裂构造,基性含矿岩体与其关系密切。通过对矿区南岩带含矿基性岩体进行三维形态分布和坑道内断裂构造与矿体接触关系分析,认为矿区内岩矿体分布受NW向和NNW向构造控制,岩矿体具NNW向膨大变宽、NW向挤压变窄特征。矿区岩矿体分布及形态是在右行挤压剪切产生的NW和NNW向两组断裂控制下侵位的,含矿基性岩浆侵
鼻咽癌是我国常见的恶性肿瘤之一,其发病率和死亡率均高于世界平均水平,又以华南地区高发。鼻咽癌对放化疗高度敏感,晚期鼻咽癌以放化疗综合治疗为主。吴万垠教授认为西医放化疗等综合治疗与鼻咽癌的中医证型演变密切相关,并认为晚期鼻咽癌发病的根本原因是正虚邪实,基本病机是气阴两虚,临证治疗以益气养阴为主,兼以扶正祛邪为基本治则,辨证论治,临床疗效甚佳。
采用双螺杆挤出机制备热塑性聚氨酯/硅橡胶动态硫化弹性体(TPSiV),通过耐紫外光老化加速测试和长期析出加速测试,考察紫外线吸收剂和受阻胺光稳定剂的种类和用量对TPSiV的色差值、外观和表面析出的影响。结果表明,紫外线吸收剂塑诺稳5522质量分数0.48%、塑诺稳5514质量分数0.24%和受阻胺光稳定剂塑诺稳944质量分数0.48%配合使用,制得的TPSiV耐光老化色差值为2.85,外观无脱色、
曼陀罗心灵动力棋疗法是基于荣格心理分析理论及认知心理学问题解决的思维过程。在监狱罪犯的心理矫正中,该疗法具有易上手,操作性强,效果明显的心理特性。作为一种专业的心理治疗方法,它以自我——情结——自性轴为个案概念化的基础,以聚焦问题、解决问题及达成咨询目标为导向,可以提高来访者的问题解决能力及自我效能感。通过各种阵法和技术,以复述的形式呈现棋局,使问题外化,又不断调整棋局、呈现问题、调整、变换棋子,
本文结合中医系统论中功能性原理重构“金郁泄之”理论,并以此探讨肺结节的因机证治。本文提出“金郁”应是表征五行属金之脏腑结构及其功能在空间上运行偏差、失衡、阻滞状态的高度概括,而“泄之”即是通过宣通、疏导、透达、升散等方法使肺脏结构和功能相互适应的治疗方法的总称。据此本文提出“金郁”是肺结节发生发展的病机总括,功能之郁是肺结节发生发展的重要因素,而结构之郁则是肺结节发生发展的病理基础。临床治疗肺结节
中医对抑郁症病因病机的研究尚不完善,目前从“肝郁”论治抑郁症不能全面反映和概括其病机及临床证候特点。在王永炎院士提出的“虚气流滞”病机理论的指导下,深入剖析了抑郁症“虚气流滞”创新病机特点,详细阐述了本病以“虚气”为本,以“流滞”为标,气郁为先、痰阻为渐、血瘀为著的病机演变规律,指出“虚气”与“流滞”具有相因积损、恶性循环的特点。为抑郁症执简驭繁地辨“机”论治提供理论依据,为中医药防治抑郁症提供新