基于多特征融合网络的人脸姿态校正算法研究

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:plghqr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,视频监控已经成为保障城市安全的主要技术手段,对监拍设备抓拍到的人脸图像进行识别也已成为人脸图像处理的重要内容。目前,正脸图像的识别技术已然获得了极佳效果和广泛应用。但在非配合无感视频监控场景下,往往需要根据一幅或多幅具有姿态变化的侧脸图像进行人脸识别。针对该问题的一个解决思路,是将多幅侧脸图像转换为单幅正脸图像,再应用正脸识别技术进行识别。在此应用背景下,本文针对多幅侧脸图像与侧脸序列图像两种不同应用场景下的正脸图像重建问题,根据不同姿态的侧脸图像间具有相关性与互补性的特点,建立了基于深度融合网络的正脸图像重建方法,为后续人脸识别提供依据。主要内容如下:
  (1)针对基于多幅侧脸图像的正脸重建问题,提出基于多通道融合生成对抗网络的人脸姿态校正方法。该网络由生成器与判别器组成。生成器以多幅侧脸图像作为输入,使用多个卷积层来依次提取各幅图像的特征。为了充分融合多幅侧脸图像的特征,将卷积长短期记忆网络引入多通道融合模块,该模块采用多支路融合方式对提取到的多姿态特征进行融合,以探究多侧脸之间的相关信息与互补特征;判别器对合成的正脸样本进行判别分析,并利用对抗机制来调整网络参数。该网络采用多通道结构对层次内及层次间的多姿态特征进行融合,获取侧脸图像的互补特征与全局结构。实验结果表明,所提方法可获得轮廓清晰的正脸图像,有利于后续识别应用。
  (2)针对侧脸序列图像的正脸重建问题,提出一种基于循环反馈多重融合网络的人脸姿态校正方法。该网络联合使用二维卷积与三维卷积,获取侧脸序列图像间的空间特征与互补特征,以多重融合的方式增强融合特征。其中,在进行三维卷积前,需对多姿态特征重新组合,使三维卷积能够较好地捕捉侧脸序列图像间的互补特征。另外,利用循环反馈机制将之前侧脸序列图像重建出的正脸图像作为先验信息,辅助当前侧脸序列图像的正脸重建过程。实验结果表明,所提方法恢复出的正脸图像不仅具有更清晰的人脸轮廓,细节特征也更为真实,并且,对所提方法恢复出的正脸图像进行识别能够获得更高的识别率。
其他文献
摘 要:本发明装置主要用于矿井运输、拖移绞车所缠钢丝绳绳头的插接工作,根据钢丝绳插接工艺及使用标准,提供一种安全、可靠、高效的解决方案。解决了钢丝绳绳头插接施工劳动强度大、效率低的问题,避免了购置成套插套机的高成本、安装不便等问题,为矿井实现安全、环保、降低投入做出应有贡献。  关键词:运输;绞车;钢丝绳;液压;自动插接  引言  煤矿采煤工作面安撤期间,需要绞车运输、拖移作业较为频繁,每部绞车准
期刊
摘 要:模具数字化设计制造理论与实践课程强调理实一体化的有机结合教学方法,以此才能保证学生切实掌握好模具数字化设计与制造的基本理论及实践方法。本文将结合模具数字化设计制造理论与实践的教学内容,针对模具数字化设计与制造课程基础理论及实践开展教学探究。  关键词:模具数字化设计制造;理论;实践  前言:以就业为导向是职业院校办学的宗旨,也是模具数字化设计制造专业寻求教学发展的必然选择,致力于培养学生的
期刊
摘 要:企业迫切需要开展质量改进,提升产品的质量水平,挺高顾客满意程度,不断降低成本,增强企业竞争力。卷烟行业同样如此,通过对卷烟加工全过程的质量改进,达到对卷烟产品的质量水平的提高,满足卷烟消费者的需要,同时通过质量改进是我们在烟丝加工过程需要做到的,什邡卷烟厂制丝车间梗丝加料出料振槽在生产过程当中会发现较多湿团烟丝影响产品质量,造成梗丝的损耗。通过系统分析原因为HT3流化床生产前蒸汽预热槽体,
期刊
摘 要:本文以某工程为例,介绍了熔盐介质光热电站储热系统、换热系统设计,并对储热系统中的光场循环泵、蒸发器熔盐泵、蒸发器熔盐调温泵、低温熔盐罐、高温熔盐罐,及换热系统中的预热器、蒸发器、过热器、再热器等重点设备选用做了详细阐述。  关键词:菲涅尔;光热电站;熔盐;储热;换热  1 以熔盐为介质的太阳能槽式聚光集热发电系统  新一代的太阳能槽式光热发电系统技术,是以熔盐为代表的热载体,利用抛物线的光
期刊
摘 要:本文先概述了Pro/E所具备的特性,然后分析了有关的设计要求以及基本流程,最后针对于家电产品设计,从以下方面探究了Pro/E的具体运用,也就是落实好系统布局以及配置、造型模块运用、工程图设置、模具的运用、装配以及改进设置等,以期能为相关人员提供借鉴。  关键词:Pro/E;家电设计;模具运用;三维造型技术  引言:基于市场竞争来看,想要进一步促进家电企业的发展,应持续增强产品质量,降低设计
期刊
随着互联网的飞速发展,当今社会逐步进入信息化时代,广告点击率(The Click-Through Rate,CTR)预估作为互联网计算广告中关键的一环,对互联网企业的运作盈利有着重要的意义。传统的广告点击率预估模型往往只能对单一特征或者两个特征之间的非线性关系建模,难以有效捕捉高维特征组合间的非线性关系,通常需要专家进行特征工程,这样会消耗大量人力物力。随着深度学习的兴起,学术界引入深度学习实现自
雷达目标检测技术在无人机检测、智能驾驶等领域具有广泛的应用,但检测无人机、地面行人等此类目标时,一方面实际检测环境复杂,待检测目标常受到强背景杂波的影响,另一方面运动目标速度慢、目标雷达截面积(Radar Cross Section,RCS)小,导致其回波能量微弱,极易被淹没在强杂波中,难以对其进行有效检测。因此,如何有效地抑制杂波,以提升在强杂波环境下慢动目标的检测性能,具有非常重要的意义。本文针对在零频地杂波及低频杂波严重的环境中,如何进行慢动目标的检测问题,重点讨论了基于子空间方法的杂波抑制算法,并
摘 要:现阶段社会进步发展,所以当代的造船业有了很大的变化,一艘船的居住空间是轮船建造及其设计的一个重要组成部分。因为轮船经常在海上航行,所以变化莫测的海洋气候以及一些极端的海况对轮船居住内部环境的影响很大,由于轮船自身的特点也对能否创造出合适的居住环境带来很大的影响。本篇文章将通过居住空间设计的原理以及要求,分析液货船的居装设计。因此,能否改变居住环境达到合适的程度,同时也是看能否提高液货船的工
期刊
多核处理器有效提高了任务调度的并行性,但核间通信开销也成为影响系统运算性能的主要因素。当具有数据关联性的任务在多核处理器上并行调度时,需要通过核间通信网络传输相关联数据,期间产生的通信开销对系统调度性能造成负面影响。目前,多核处理器任务调度研究中所面临的挑战是如何协同调度计算任务和通信任务,优化调度性能。由于通信任务调度与核间通信网络架构紧密相关,因此本文针对关联任务在总线架构多核处理器和全连接架构多核处理器的调度问题展开研究。
  基于关联任务在总线架构多核处理器的调度特征,本文提出一种关联任务调
随着信息技术的飞速发展,所产生的数据量也在呈几何级数增长。这些数据不仅规模庞大,类型多变,还存在复杂的空间结构。传统的数字信号处理方法虽然已经取得长足的发展,但在处理这类数据时依然存在自身的局限性。这类数据的处理需求也催生了新的研究领域——图信号处理。在图信号处理中,数据的空间拓扑结构被抽象为由顶点和边构成的图,边权值表示顶点间的相关性,图上各个顶点映射得到的值就是图信号值,因此图信号包含了数据的空间结构信息。获取数据的空间结构就是图学习问题,这也是进行图信号处理研究的第一步。当前许多图学习问题都是建立在