基于深度卷积神经网络的关键点检测算法研究

来源 :中国科学院大学(中国科学院光电技术研究所 | 被引量 : 0次 | 上传用户:mickey887100
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
关键点检测是光电成像测量的基础,是提高扩展目标跟踪精度并准确估计其运动姿态与行为意图的关键技术。作为计算机视觉中的重要领域,其也在行为识别、自动驾驶、虚拟或增强现实等领域得到广泛应用。近年来,基于深度卷积神经网络的人体关键点检测研究尤为火热,并且发展了以HRNet为代表的一系列关键点检测算法。然而对于运动目标姿态测量的实时精确需求而言,这些算法在面临着环境光照变化、目标尺度变化、视角旋转和背景干扰等任务挑战的同时,还需解决深度卷积神经网络普遍存在的计算复杂度高、参数量大以及缺乏可解释性等共性问题。着眼于发展高精度、轻量化、低计算量的运动目标姿态测量技术,本文基于深度卷积神经网络对关键点检测进行了如下研究:为了满足对高精度、低计算量网络的应用需求,首先对关键点检测网络HRNet进行了冗余性分析和去冗余设计,去除了其参数量大、冗余度高的第四阶段,形成了一种简单直接的去冗余高分辨网络HRNet_W32_S3。同时,针对HRNet_W32_S3因第四尺度特征缺失和充分特征交融而导致的性能退化问题,提出了一种HRNet_W32_S3与UNet模块相级联的网络,即去冗余级联高分辨网络CHRNet_W32。MPII数据集和COCO数据集测试结果表明,只有HRNet_W32网络40%参数量却与前者精度相近的CHRNet_W32,不仅较大程度地去除了冗余结构,而且大幅减缓了因参数量减少而导致的性能退化问题。为了解决现有轻量化模型的性能退化问题,通过交互增强建模方法MEME重构高效基准网络Eff Base,创新地提出了一种高效率且高性能关键点检测模型EEff KPNet。MPII数据集和COCO数据集上的实验结果表明,只有HRNet_W48网络14%参数量却实现了精度突破的EEff KPNet_P0,不仅实现了高效率且高性能的关键点检测,还验证了MEME解决小模型性能退化问题的有效性。为了解决现有模型的热力图输出缺乏可解释评估和对数据变换鲁棒性不足的问题,提出了一种基于偶然不确定性的测试时增强方法TTA-AU,并将其即插即用在各关键点检测模型中,构建了一系列“基于测试时增强的关键点检测算法”。大量实验表明,增强后的关键点检测算法在评估热力图输出的不确定性的同时,进一步提升了关键点检测的精度和鲁棒性。为了将上述网络或算法在刚体目标上进行应用与分析,构建了具诸多有代表性困难和挑战的固定翼飞机关键点检测数据集Airplane,并在该数据集上实现了HRNet_W32、CHRNet_W32和Eff KPNet_P0等网络及其TTA-AU增强算法的训练和测试。定量指标和定性分析表明,各网络和算法在固定翼飞机上得到了预期的普适性验证。具体地,在单卡GTX-1080Ti GPU平台上,Eff KPNet_P0实现了高效率(22+帧的推理速度)且高性能(87.3%AP和90.0%AR的检测结果)的关键点检测,且其TTA-AU增强算法在得到额外精度的同时仍保持了足够快的推理速度。
其他文献
数学学科作为高中学科中的主要科目之一,数学课堂的教学质量与学生的学习成绩息息相关,想要加深教材中的重要理论和公式在学生脑海中存留的印象,进行针对性的解题训练是一条有效的捷径.本文以高中数学为研究对象,分析讨论在高中阶段如何培养学生的数学解题思路,并讨论能够提高学生解题能力的训练方法,以期为高中数学教师的教学活动设计提供有价值的参考.
以低糖、松软、无添加剂红薯脯为试材,研究了微波处理、真空包装处理及两者结合使用时其对20℃条件下贮藏期间的细菌总数、水分含量、硬度、总糖含量和感官评定的变化情况。结果表明:微波结合真空处理能有效抑制细菌总数的增长,延缓含水量、硬度和总糖含量的变化进程,感官评分值最高,贮藏效果最佳。
针对农村地区农产品物流“最初一公里”存在的储藏难、损耗高的问题,以农产品主产区、特色农产品优势区、农产品集散区等具有冷藏保鲜需求的地区为例,提出基于本地冷藏、产地直发运营模式下的农村地区仓储保鲜冷链物流中心选址模型。针对鲜活农产品易腐、易变质,且对运输和冷藏要求高的特点,在选址模型引入时间约束。以运输费用、投资建设费用、运营费用之和最小为目标函数建立数学模型,利用Gurobi进行求解,寻找满足时效
时代高速发展,高科技在教育教学中的运用越来越普遍,虽然能带给学生便捷的学习方式,但却缺少了一份与自然亲密接触、亲身体验的乐趣,这也导致学生写不出真实的劳动体验与过程。基于此,尝试利用《自然笔记》创作,帮助学生通过学科融合获得丰富的劳动体验,从中感悟和体认劳动价值,培育劳动精神。
贵州地处云贵高原,茶业是贵州340多万农民的一项绿色产业,是贵州12大特色农业支柱产业之一。中国茶叶流通协会于2021中国茶业品牌颁奖典礼上发布了“2021中国茶叶行业年度调查结果”公布了年度百强企业及百强县域,余庆县连续四年被评为全国“百强县域”。余庆的“苦丁茶”是继贵州茅台后,贵州省第二个获得地理标志保护的地方品牌和商标,被誉为“绿色金子”。但这么多年来,当地却一直没有好好利用这个招牌。为了突
目的:探讨盐酸左西替利嗪口服溶液联合孟鲁司特咀嚼片治疗儿童慢性荨麻疹的效果。方法:选取2020年6月-2021年2月江苏省邳州市人民医院收治的44例慢性荨麻疹患儿作为研究对象,按随机法分为对照组和试验组,各22例。对照组应用盐酸左西替利嗪口服溶液治疗,试验组在对照组基础上应用孟鲁司特钠咀嚼片治疗。比较两组治疗前后临床症状积分、血清因子水平、复发率及不良反应发生率。结果:治疗前,两组皮肤瘙痒程度、风
近年来,智能汽车产业的发展十分迅猛,传统汽车制造商纷纷开始大力发展智能汽车产业,除此之外还涌现了大量的新一代智能汽车制造商,同时大量的互联网企业也开始利用自身优势入局智能汽车产业。现阶段车辆监控平台已经趋于成熟,它们主要通过采集车辆的驾驶数据,监控中心对这些驾驶数据进行汇总,管理员通过监控中心能够实时了解到车辆的驾驶状况以及驾驶员的驾驶行为。但目前的监控平台并没有对车辆的网络安全状况给予足够的重视
<正>在新课改的教育大背景中,为了让学生在课堂教学环节真正有所成长,相关教育部门提倡将语文课的学习打造成生态语文课堂,并让学生在生态语文课堂中找到语文学习的真正意义。而说明文的学习是语文课程中的重要环节,教师如果在给学生讲解说明文时只注重知识的传授,而忽略文中的语言及多样的表达方式,将无法成功打造出生态语文课堂,语文教师在为学生上课时应该更加注重课堂的趣味性和高效性。
期刊
近年来,我国包装行业蓬勃发展,同时也伴随着巨大的环境污染和能源消耗。生活垃圾分类和“双碳”政策的普及和实施以来,我国居民对绿色包装的重视度也随之不断提高。在众多食品品类中,儿童糖果包装对食品的保护性、安全性以及趣味性要求较高,因此,该类食品在可持续包装设计层面所受限制较大。本课题结合市场现状及可持续设计方法和原则进行探索研究,并基于可持续设计的4R理论,探索儿童糖果包装的设计创新。首先,对于“4R
随着道路状况和设施的不断完善,越来越多的人在短途出行时会选择汽车为交通工具,汽车成为人们日常生活中不可缺少的出行工具,但是随之而来的问题是交通拥堵现象加重。文章以山东省济南市长清区大学路和海棠路交叉口为例,运用webster方法对该交叉口进行信号配时优化,通过VISSIM仿真评价结果,对比优化前后各评价指标,得到优化后人们平均排队时长降低了7.09%,最长排队时长降低了11.78%,延误时间减少了