基于共现信息及感知归类的衣物识别与解析

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:lgwll
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来随着电子商务的快速发展,虚拟试衣、衣物推荐、以及基于图片的衣物检索等逐渐具有广泛的应用需求。这些应用中的一个关键的问题是衣物的识别与解析,即实现图片级别和像素级别的衣物标注。现实中的衣物图片背景复杂、图片中的人体姿势各异、衣服形状款式多样,同时带标签数据集有限,使得衣物识别及衣物解析变得十分困难、现有的模型性能普遍不理想。为此,本文主要针对图片中衣物类别的相关特性以及影响衣物解析性能关键因素进行深入研究,提出了衣物识别和解析的改进算法。具体工作包括:(1)图片层面上的衣物识别,即针对衣物图像进行衣物类别的标注。目前主流的衣物识别算法都使用单一任务模型训练衣物分类器,没有考虑衣物类别之间的共现关系。即便有部分工作考虑了这一关系,其模型也不利于之后的特征选择。针对这一问题,本文将衣物共现约束项加入到多任务学习的目标函数中,以拟合衣物类别之间的关系。实验证明,加入衣物共现约束项的平均性能优于单一任务学习、神经网络以及传统的多任务学习等方法,其训练结果便于可视化,可用于特征选择。(2)像素层面上的衣物解析,即对一张图像中不同区域标注具体的衣物标签。首先,虽然目前大部分主流模型都有考虑人体部位的对称性,然而它们却忽略了衣物本身的对称性;另外,许多衣物解析模型的解析结果中存在边缘标签模糊现象,也即不同衣物区域的接壤处的错误率较高。针对这些问题,本文参考视觉感知(visual perception)领域中的感知归类(perceptual grouping)理论,对基础的结构性条件随机场模型进行改进。即,根据对称性感知,在模型中加入体现衣物对称性的二元势函数以将对称性相近的备选区域标注为相同的类别;另外,根据轮廓闭包理论,在基础模型的损失函数中加入了轮廓距离代价项,惩罚没有与实际边界对齐的预测边界,使得预测的衣物区域边界尽量与实际图像中的边缘对齐以减少接壤区域的错误率。最后,基于衣物识别的实验结果,将原模型中使用单一任务逻辑回归训练的部分改为使用多任务学习,以挖掘衣物类别间关系。实验证明,改进的衣物解析模型的平均性能高于目前主流的基于条件随机场或隐式马尔科夫模型的衣物解析模型,而且能更好地解析某些特殊衣物图片。
其他文献
规划识别可分为锁眼型(keyhole)和意图型(intention),又可划分为个体的和群体的两种类型,对于敌舰艇编队的规划识别则属于意图型的和群体类型的。舰船及其编队指控系统在战场
<正>民间游戏具有很强的趣味性与教育意义,在今天的幼儿教育中仍然具有非常重要的作用。近年来,我们将民间游戏作为一种有益的教学资源灵活、创新地融合于幼儿园的体育活动之
这项研究探讨香港与上海两地青年的公共政策或社会责任、子孙或家庭责任、个人责任的觉识对其照顾、接纳和承担照顾父母的意愿的效应。研究结果显示:(1)对政府或社会的养老政
本文是一篇口译实践报告,以笔者在中国跨国技术转移大会河北卫星会中担任的口译工作为报告对象。在此次口译实践中,笔者主要负责先进制造专场模块对接厅PPT项目展示讲解以及
<正>《3-6岁儿童学习与发展指南》指出:"幼儿的学习是以直接经验为基础,在游戏和日常生活中进行的"。角色游戏为幼儿提供了直接感知、实际操作和亲身体验和机会,游戏过程中强
作为国库会计数据集中处理系统,TCBS的出现顺应了帐务处理信息化变革的需要,它不仅提高了国库会计信息的处理效率,更增强了基层人行服务地方经济的能力。但汇集多种优势于一
目的 分析良性气道狭窄的病因构成比,分析狭窄的好发部位。方法 对重庆医科大学附属第一医院呼吸与危重症医学科2013年1月至2018年1月的237例确诊为良性气道狭窄的病历资料进
在德日刑法中,期待可能性归属于有责性,但它与故意和过失在犯罪论体系中的法律地位不同,故意和过失是有责性的必备要素,期待可能性是作为有责性中的例外因素而存在的。如果我
目的:观察小针刀结合蒙医放血疗法治疗腰椎间盘突出症的临床疗效。方法:共选取腰椎间盘突出症患者100例,将其随机分为观察组(50例)和对照组(50例)。观察组使用小针刀结合蒙医
<正>厄内斯特·海明威是当代美国著名的作家之一,也是深受我国读者喜爱的作者之一。从20世纪80年代以来,人们关于海明威的研究,一直行进在"硬汉精神""死亡意识"以及"悲剧意识