基于深度学习的未配对图像恢复研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:skyeyviva
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像恢复是指从低质量图像中恢复出原始的高质量图像的任务。图像质量的退化通常发生在图像采集、传输以及存储过程中,可能存在的退化包括附加噪声、下采样、模糊以及像素损坏等,因此图像恢复任务主要包括:图像去噪、图像去模糊、图像超分辨率重建以及图像修复等。本文主要基于CT(Computed Tomography)图像开展去噪和超分辨率重建等图像恢复任务的研究。CT是现代放射学中最重要的成像方式之一,由于能够显示内部器官的精细细节,CT成像已被广泛用于疾病的诊断和早期筛查。但是CT成像也存在一些缺点,包括在进行CT扫描时由于X射线穿过物体时部分能量被吸收导致在重建后的CT图像中出现的射束硬化伪影,以及为了降低对人体损害而降低了扫描剂量导致在重建后的低剂量CT图像中出现较强的噪声等。这些问题均会降低重建后的CT图像质量,对疾病的诊断有较大的影响。目前针对射束硬化伪影校正问题,有基于硬件滤波、双能量、统计多色重建和线性化等的传统方法,除此之外,还有一些基于模型的校正方法和基于学习的方法等。虽然目前有这么多成熟的射束硬化伪影校正方法,但是对医生来说缺乏一个系统的软件来实现伪影的校正。对于低剂量CT图像去噪而言,传统方法主要有正弦图滤波、迭代重建以及重建后处理等三类。而随着机器学习的发展也出现了一些基于学习的低剂量CT图像去噪方法,这些方法实现了比传统方法更优的去噪效果,但是这些基于学习的方法均要求像素配准的配对训练数据,而在实际情况中,配对的训练数据很难获取到。针对以上问题,本文开展了基于未配对数据的低剂量CT图像去噪和图像超分辨率重建研究。本文的主要研究内容概括如下:(1)基于物理仿体模型的射束硬化伪影校正以及软件研发。本文实现了基于模型的射束硬化伪影校正方法,并开发了相应的射束硬化伪影校正软件。利用自制的仿体模型得到了存在射束硬化伪影的CT图像数据,并在此数据基础上验证了软件的伪影校正功能,结果表明本文开发的射束硬化伪影抑制软件在真实数据上有效的抑制了伪影。(2)低剂量CT图像的去噪方法研究。针对实际应用中配对数据难以获取的情况,本文提出了一种在未配对训练数据下实现低剂量CT去噪的网络。该网络包含两个分别用来生成去噪后图像和噪声的生成网络,通过结合两者的输出得到合成的低剂量CT图像。另外还有两个判别网络,分别用来区分去噪后图像和常规剂量CT图像以及判别合成的低剂量CT图像和真实的低剂量CT图像。通过与现有的基于未配对样本训练的cycle-GAN网络模型进行对比分析之后发现,本文提出的方法在未配对图像去噪任务上具有更好的视觉结果,并且在峰值信噪比(Peak Signal-to-Noise Ratio,PSNR)和结构相似性(Structural Similarity,SSIM)值上分别比cycle-GAN网络高出了 8.01和0.05。另外本文提出的方法在配对数据下的表现与现有的一些基于深度学习的方法基本持平,在PSNR和SSIM等图像质量评价指标上的表现最佳。(3)基于深度学习的图像超分辨率重建研究。针对自然图像数据集,本文总结分析了现有的基于深度学习的自然图像超分辨率重建方法,并结合EDSR和SRGAN网络实现了增强的SRGAN网络。本文基于现有的方法以及改进的方法实现了配对和未配对数据下的自然图像超分辨率重建任务,并且对比分析了各种方法的有效性及优劣。针对CT图像超分辨任务,本文首先将采集到的高分辨率数据进行了下采样得到了低分辨率数据,然后应用了在自然图像超分辨率重建任务中的几种方法,并将原始的cycle-GAN与SRGAN网络结合实现了用于未配对训练的SR-cyclegan网络,实现了配对和未配对数据下的CT图像超分辨率重建任务,并对各种方法的有效性进行了量化分析评估。
其他文献
半导体光催化剂绿色环保、质优价廉、且可循环使用,为高效利用太阳能治理能源短缺和环境污染问题提供了一个新的研究方向。其中纳米TiO2具有氧化性强、化学性能稳定、无毒和
最近几年,表面机械研磨处理(SMAT)被认为是非常有效的表面纳米晶化技术。SMAT可以将表面的晶粒尺寸细化到纳米级,并形成梯度纳米结构。由表及里,晶粒尺寸逐渐增大。梯度纳米
随着地铁在我国的迅速发展,乘客对于地铁车厢热环境的要求也越来越高。现有对地铁车厢热环境的研究主要集中在地铁车门关闭时段的稳态工况,而有关车门启闭对地铁车厢内热环境的研究较少。然而地铁列车在运行过程中的车门启闭相当频繁,车厢内热环境极易受到车门启闭的影响。为了更好地保证地铁车厢内的热环境,减缓车门启闭对地铁车厢热环境的不利影响,实现对地铁车厢热环境的精细化控制,研究车门启闭对地铁车厢热环境的影响具有
随着计算机网络技术和通信技术的快速发展,人们通过互联网能够便捷地进行信息的交流与传递,随之而来的安全隐私问题变得越来越突出,各种数字产品的版权亟待受到保护。在现代信息安全的领域中,数字水印技术可以有效地保护数字产品拥有者的版权所有权,减少数字产品的盗版问题。由于单个水印无法解决多著作权的问题,并且在复杂的互联网环境中难以保护好数字产品的完整性,因此需要对多重水印进行研究。本文主要在数字水印的生成算
介孔金属氧化物自问世以来,由于其比表面积大,表面活性中心多,孔较大而且孔径分布集中从而有利于质量传递,另外其介观结构与组分可调因此能够更加针对性的应用于不同的场合等诸多优势,往往被作为良好的催化材料广泛研究。在种类繁多的金属氧化物中,具有d10电子结构和纳米尺寸的镓系金属氧化物由于其自身特性,不仅具有较高的电子迁移率,较大的带隙宽度以及纳米尺寸下具有更多的活性位点和较好的电子传输能,而且近年来在光
随着通信技术的发展以及用户设备数量和多媒体应用的急剧增加,移动数据流量在全球范围内呈现爆炸式增长。同时,用户对高速率、低时延通信的需求也在日益增加。UAV辅助的异构网络通过在传统的蜂窝网络中部署UAV空中基站,能够显著提升网络性能,吸引了研究人员的广泛关注。在UAV辅助的异构网络中,对UAV技术进行研究与应用不仅能增强热点区域的网络覆盖,满足持续增长的网络需求,同时还可以支持多媒体应用计算密集型任
柔性电子器件可以在承受较大变形的同时使其电子电路本身不受变形的影响。石墨烯作为2D材料,大气环境下有高电子迁移率、极好的机械属性,可以用于制作可拉伸穿戴器件,本文主要进行基于石墨烯与类石墨烯材料的多功能柔性传感器的研究。主要研究内容包括:(1)在锗(110)衬底上通过化学气相沉积(CVD)生长石墨烯,并通过原子力显微镜(AFM)与Raman光谱对其进行表征。表征结果显示,我们成功地制备出高质量的单
耕地是人类赖以生存的基本要素,如何科学合理、集约有效利用耕地资源,提高我国粮食产量对社会经济稳定发展具有重要的现实意义。1978年改革开放之后,我国经济蓬勃发展,工业化、城镇化加速,人民生活水平稳步提高。但由于人类活动强度的加大,造成大量的耕地重金属污染严重、土壤盐碱化、富营养化等现象,使我国耕地资源“量质双降”。同时随着全球继续变暖,气候变化自然风险加大,极端天气事件增多,对粮食产量、品质、市场
随着各国军事实力的提高以及武器装备的不断更新,作战形式由单一作战发展为联合作战。信息支持在联合作战体系中所起到的作用日益凸显,数据链系统的应用极大地提高了作战信息的传输与保障性能。对数据链体系的作战效能和体系贡献度进行研究,可为装备选取以及确定武器发展方向提供指导意见。传统效能评估方法大多从武器本身的角度进行研究,而不考虑作战环境以及作战过程对作战效能产生的影响,评估结果往往存在主观性强、说服力弱
目标识别是计算机视觉领域的一个重要研究方向。在过去的几十年中,二维图像识别已经被广泛研究,并且取得了丰硕成果。与二维图像相比,三维点云不受光照强度、旋转变换以及尺度变化的影响,同时可以提供更加丰富的几何信息,使得三维点云识别能够更加精确的估计物体的位姿。此外,随着数据采集设备的不断发展,也使得获取点云数据更加容易。基于这些优点,三维点云目标识别已经逐渐成为研究热点,并已广泛应用于各个领域。本文在对