基于实景数据增强和双路径融合网络的实时街景语义分割算法

来源 :电子学报 | 被引量 : 0次 | 上传用户:loverbeyond
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
街景图像的分割在工业运用中具有十分重要的作用,但是街景图像具有种类繁多、光照多变等特点,此外,街景分割任务在追求准确性的同时要兼顾实时性,以上特点使得该任务具有很大的挑战性.本文针对这一挑战性任务提出了一个由空间路径和细节路径组成的双路径网络(Dual-path Fusion Network,DFNet),其中细节路径利用高分辨率的输入得到丰富的边界信息,空间路径利用细节路径产生的高质量特征图获得足够多的语义信息;网络的开始嵌入了一个可训练的图像预处理模块(Image Preprocessing Module,IPM),该模块可以使光照不同的图像进入网络正式训练之前在RGB通道上具有方差和均值的一致性;经过预处理模块之后的特征图会分别输入到细节路径和空间路径;本文提出了一个条状注意力细化模块(Attention Refinement Module,ARM),并将其放到空间路径的最后,可以将通道级信息和局部条状信息有效结合起来;在网络的最后,利用图像融合模块(Feature Fusion Module,FFM)对两条路径的特征信息进行融合,得到最后的分割结果 .同时,本文还提出了一种基于小目标重组的“复制粘贴”数据增强方法,减弱了小目标样本数据不均衡的问题,同时扩充了数据集,该算法可以提升单个网络近2%的平均交并比(mIoU).本文利用所提算法在CityScapes和CamVid数据集上进行了实验验证,对于CityScapes数据集来说,输入大小为1 024×2 048,其每秒处理帧数(FPS)和mIoU分别达到了98和70.1%;对于CamVid数据集来说,输入大小为720×960,其FPS和mIoU分别达到了208和65.7%.与已有算法相比,本文算法的推理速度要优于最先进的实时街景语义分割算法,同时保持了较高的分割结果准确性,本文算法在街景图像语义分割速度和分割性能之间取得了良好的平衡.
其他文献
乡村振兴背景下,乡村治理急剧转型。以行政村为核心的乡村组织陷入治理困境,亟需实现功能的扩大化。治理主体间的合作共治是乡村治理有效的重要路径。村组共治通过行政村与村民小组之间的角色分工实现合作共治,表现出“通过分工的合作共治”的耦合逻辑。在耦合式分工中,行政村是行政类事务的承担者、混合类事务的攻坚者、自治类事务的支持者,行政村治理的角色运行机制包括行政村组织的正式化、支持网络的建立。村民小组是行政类
【目的】明确组蛋白去甲基化酶(jumonji-domain containing protein 3,JMJD3)抑制剂GSK-J4对神经胶质瘤细胞迁移能力的影响。【方法】用含有不同终浓度GSK-J4的培养基对U87和U251细胞进行培养,然后采用Real-time PCR、Western blotting、划痕和迁移小室等检测手段从mRNA、蛋白表达和细胞功能三个层面明确GSK-J4对神经胶质瘤
客运交通在京津冀地区城市交通总量中占比高,其减排潜力是影响交通碳达峰的关键因素。本文建立了基于Agent建模与仿真方法的京津冀地区城市客运交通系统的模型,模拟了京津冀地区不同城市客运交通碳减排政策情景下消费者的交通出行行为,评估了各类碳减排政策的环境效益、经济成本及其对碳达峰的影响。结果显示:(1)乘用车燃料效能提升政策是唯一可以在2030年京津冀三地同时实现城市客运交通碳排放达峰的政策情景,且其
目标识别作为深度学习中最受欢迎的领域之一,已广泛应用于民用的各个方面,如人脸识别、行人重识别、车牌识别、车辆识别等;而在军事应用领域,由于军事目标数据集较少,但识别要求精度高实时性强,所以还在发展阶段。首先阐述了基于深度学习的军事目标识别发展现状;然后介绍了6种目前主流的基于深度学习的军事目标识别算法(包括Mask R-CNN、GAN与深度森林、DRFCN、E-MobileNet、SSD300、Y
数字经济时代下,制造企业利用大数据资源促进数字化转型已经成为必然选择,并逐渐成为研究热点。本文运用Mplus8.0 软件通过结构方程模型方法(SEM),以427家制造企业为样本,结合动态能力理论和组织惯例理论,对制造企业大数据资源、数字动态能力、组织惯例更新与数字化转型绩效之间的影响展开研究。实证结果表明:大数据资源、数字动态能力的三个子维度:数字感知能力、数字利用能力和数字重构能力以及组织惯例更
随着媒介技术的发展,文化的全球化传播逐渐成为一种主流的传播态势。东盟是中国周边外交的重要区域,在“一带一路”全球传播中具有重要的战略地位。伴随着区域间的文化传播交流日益密切,如何提升中国文化的国际传播力与传播效果就成为建构国家文化软实力的重要议题。本文从文化传统、商业交流和娱乐文化三个方面对跨文化视角下马来西亚的中国文化景观进行描述和分析,并以此回应中国文化在马来西亚的传播现状与影响力。
议题中心教学是教师综合相关学科知识,运用多样教学法,将议题的正反不同观点呈现给学生的一种教学方式。20世纪90年代以来,香港的中学地理教学以议题为中心,获得了较好的发展并形成了自身的发展特点,参考其发展经验,本文提出区域与议题在地理教学中融合的策略:融合目标站位高远,真实情境促进学生全面发展;融合形式多样态,课堂活动驱动地理深度学习;融合内容单元统整,问题教学推动学生素养发展。
分析传统能源大省山西能源生产和消费的总量及其构成、特点,概括了山西省传统能源、新能源开发利用情况及存在问题,探索提出在能源绿色低碳转型阶段和“双碳”战略下,山西省传统能源和清洁能源创新、协同发展路径,并提出具体措施与建议。研究认为:山西省传统能源和新能源的“协同创新”发展,本质上是改革能源供给结构和供给质量,实现能源供给从量到质的转变,核心在于传统高碳能源低碳发展,清洁能源规模化高质量发展,实现传
当前高职院校游泳教学发展面临诸多问题,并且很多问题也得不到有效解决,导致高职院校游泳教学效果越来越差,难以满足学生的学习需求和人才体能培养的要求。为落实国家提出的全民健身等策略要求,提升学生的体育能力,高职院校必须要重视游泳教学模式构建与完善问题。本文从开展游泳教学的重要性及意义开始论述,分析了当前高职院校游泳教学的现状及存在的问题,以及提出相应的解决对策,希望能对高职院校提升游泳教学水平提出一些