基于生成对抗网络的水下图像增强方法研究

来源 :青岛大学 | 被引量 : 0次 | 上传用户:aa377059590
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着科技的进步,海洋资源的探索变得日益频繁。海洋中蕴含着丰富的矿产资源,可以满足人类对资源的需求。水下图像作为水下环境信息的载体,是人类认识海洋和探索海洋的重要工具。然而由于水下环境对光的吸收和散射效应,真实水下场景中拍摄的图像往往会出现图像模糊和颜色失真的现象。这对水下成像设备带来了巨大的挑战,也限制了水下视觉任务的进展。目前大部分水下图像增强方法的效果不甚理想,增强的结果中存在雾度残留、细节模糊和色彩不自然的现象。针对此问题,本文围绕水下图像成像的特点,采用深度学习的方法,提出一种新的基于生成对抗网络(Generative Adversarial Network,GAN)的水下图像增强方法。主要内容及创新点如下:(1)本文提出一个端到端的生成器,生成器的设计基于U-Net编解码结构。针对水下图像在不同颜色通道中的信息含量不同,且在不同像素位置上的模糊程度不同的问题,本文结合通道注意力机制、像素注意力机制和残差网络提出特征注意力残差(Feature Attention Residual,FAR)模块,使网络自适应提取重要特征,着重关注水下图像的模糊严重区域以及信息含量较少的红色通道。为了更好的融合多级别特征,本文提出自适应密集特征融合(Adaptive Dense Feature Fusion,ADFF)模块,该模块能够自适应学习不同级别特征的空间重要性权重,从而促使网络从以前和现在的特征中学习更有效的特征进行融合。为了对所提取的特征进行重塑细化,本文提出SOS(Strengthen Operate Subtract)模块,该模块通过结合SOS Boosting策略实现对图像特征的逐步细化。与其他仅使用U-Net作为生成器的方法不同,本文在生成器中使用FAR模块进行特征提取,使用ADFF模块进行特征融合,使用SOS模块进行特征细化,以此提高生成器的学习能力。(2)本文判别器的设计基于马尔可夫判别器(Patch GAN)。不同于其他使用Patch GAN作为判别器的方法,为了使判别器更好的监督生成器的学习,本文在判别器中设计了多尺度特征(Multi-scale Feature,MF)模块。该模块可以汇集具有不同感受野的多尺度特征,使判别器利用全局语义和局部细节级别的特征信息进行更准确的判别,并引导生成器生成更加细致的清晰图像。(3)本文构建了有利于GAN训练的新损失函数。为了稳定GAN的训练,本文将CGAN(Conditional GAN)和WGAN-GP(Wasserstein GAN with Gradient Penalty)的对抗损失相融合,并引入组合损失作为本文方法的总损失函数。新的损失函数能够稳定网络的训练,更好的约束网络模型,促使网络得到高质量清晰图像。实验结果表明,本文方法能够有效的解决水下图像的雾化模糊和色偏问题,并生成视觉效果清晰的水下图像。同时,与其他几种水下图像增强方法相比,本文方法在定性和定量对比中均取得了最佳性能。其中,在合成数据集上,相比于最新的深度学习水下图像增强方法UIE-DAL,本文方法的结构相似性(Structural Similarity,SSIM)指标提升了6.7%,峰值信噪比(Peak-Signal to Noise Ratio,PSNR)指标提升了37.8%。
其他文献
作为低碳烷烃选择性氧化的典型代表,正丁烷选择性氧化制备顺酐(MA)表现出了巨大的研究价值,目前唯一实现其工业化的催化剂是钒磷氧(VPO)催化剂。但是由于VPO催化剂仍然存在结晶性差,比表面积低和杂相多等诸多问题,致使正丁烷在选择性氧化反应过程中转化率低,同时顺酐的选择性和收率也不高。本文针对以上VPO催化剂存在的各种问题,以提高顺酐的收率为研究目标,分别探究了在不添加溶剂与添加绿色环保的低共熔溶剂
实时广告竞价(Real-Time Bidding,RTB)目前是现代互联网广告行业普遍采用的流量交易方法,结合大数据技术能够做到广告针对相应用户的精准投放,其整个投放广告的流程包括提供方平台(Service Side Platform,SSP)发起广告展示的请求,RTB的交易中心(AD e Xchange,ADX)向需求方平台(Demand Side Platform,DSP)发起竞价请求,而DS
细胞的异质性对正确解释疾病的发生和发展中起着重要的作用。单细胞水平上的异质性分析对疾病的诊断和治疗至关重要。核糖核酸(Ribonucleic Acid,RNA)在细胞蛋白质合成和基因调控中扮演着重要的作用。因为单细胞RNA测序具有高通量和敏感性等特点,使其适用于细胞的异质性分析。单细胞捕获是进行RNA测序的关键步骤和基础,然而使用传统的技术手段分离和捕获被测样本中的单细胞是十分困难的。微流控技术作
随着中国在非洲西部国家援建项目逐渐增多,研究非洲西部硬质沥青在内的典型材料的技术性能,对于中国技术标准走出去和在当地属地化应用具有重要意义。研究了非洲西部地区常用的3种典型硬质沥青:Termcotank、DHS、ERES,对其常规物理性能、流变性能、高低温等级及疲劳性能进行了测试分析。研究结果表明,Termcotank沥青高温性能最好,低温性能略差,适合用于对高温性能要求较为严格的地区;DHS和E
目的:免疫联合化疗在晚期或转移性食管鳞癌治疗已取得不俗疗效,但在局部晚期食管鳞癌的治疗尚属于探索阶段。本研究旨在研究卡瑞利珠单抗联合多西他赛和卡铂在局部晚期食管鳞癌新辅助治疗的安全性和有效性。方法:选取河北医科大学第四医院胸一科自2019年11月至2021年10月收治的病理类型为食管鳞癌,临床分期ⅡA-ⅢB期的29例初治患者纳入研究,给予卡瑞利珠单抗联合多西他赛和卡铂2周期后行食管癌根治术,术后免
1.研究背景变应性鼻炎,(又称过敏性鼻炎,Allergic Rhinitis,AR),是特应性个体接触致敏原后由IgE介导的介质释放、并有多种免疫活性细胞和细胞因子参与的鼻腔粘膜变态反应性疾病。临床典型症状为鼻痒、鼻塞、发作性喷嚏及流涕等。据报道,变应性鼻炎在全球的患病率约为10%-20%,在中国约为8.7%-37.9%。AR过去被归类为季节性或常年性变应性鼻炎,而新一版的“变应性鼻炎及其对哮喘影
2021年两会期间,全国人大代表、深圳证券交易所党委书记王建军指出在后疫情经济发展新时期,应加大股权激励实施力度。股权激励是我国企业常应用的激励机制,其激励对象分为高管和非高管。高管股权激励有利于缓解企业所有权和经营权相分离所产生的委托代理问题,而非高管股权激励则通过激励企业核心员工,提升员工积极性、创造性、竞争意识和责任心,吸引保留核心人才,从而更好地增强企业市场竞争力,促进企业长远发展,提升企
1978年中国共产党十一届三中全会宣布实施改革开放政策,国企混合所有制改革和混合所有制经济发展就是在这样的历史大背景下展开的,与我国国有企业改革的历史进程相伴随。近年来,随着《关于深化国有企业改革的指导意见》及22个配套文件的出台,我国形成了国企改革“1+N”框架体系,为国有企业混合所有制改革提出了指导意见。《国企改革三年行动方案(2020-2022年)》的印发实施,标志着国企混合所有制改革进入全
肝纤维化是不同的急慢性肝损伤后的愈合反应,也是肝损伤发展至肝硬化的中间环节。早期的肝纤维化是一种可逆性病变,若未得到及时治疗,发展至后期将逐渐变为肝硬化,疾病不可逆转。金银花(Lonicerae Japonicae Flos,FL)是我国传统清热解毒中草药,实验室前期研究发现FL可以改善对乙酰氨基酚诱导的急性肝损伤,同时金银花中的主要活性成分绿原酸(Chlorogenic acid,CGA)通过抗
港口是世界贸易物流的关键节点,集装箱码头是港口最重要的物流作业单位。集装箱码头由多种装卸设备、多种目的车辆、交通路网、不同性质的堆场、进出闸口、作业控制中心等设施设备组成。码头承接装卸船舶、集疏运车辆及集装箱的输入输出服务,在各种作业计划的引导下动态运行,完成物流作业任务。整个码头系统组成单元众多、物流层次交叉嵌套、作业计划分解传递,呈现出多层次多尺度的复杂性特征。码头系统整体行为的影响因素非常复