基于单张可逆视频快照的视频还原算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:Cskn__ZHANG
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
相较于静态图像,视频加载和观看的时间成本更高,因此在海量视频中查找所需的视频内容并不容易。大多数视频流媒体和视频共享服务站点都提供视频预览功能,以提供更好的用户浏览体验。在本文中,我们致力于通过运动信息嵌入图像生成视频预览。为此,本文提出了两个级联网络,即运动嵌入网络和运动扩展网络。运动嵌入网络旨在将时空信息嵌入到称为视频快照的嵌入图像中。而运动扩展网络则用于解码视频快照,实现视频快照到视频的反向转换。为了在训练过程中保持运动嵌入和扩展的可逆性,以及使网络更专注于运动信息,本文相应地设计了四个量身定制的约束函数和一个注意力机制模块。为了增强观看体验,本文为扩展网络配置了一个多帧插值模块,以产生较长的视频预览以及更平滑的播放效果。大量实验表明,本文的方法可以成功地将视频的时空信息嵌入到一张“活的”图像中,然后可以将其解码回视频预览。本文在大量视频上进行了定量和定性分析来验证所提出方法的有效性。特别地,在大量视频实验上统计的峰值信噪比(Peak signal-to-noise ratio,PSNR)和结构相似性指标(Structural similarity index,SSIM)的数据表明,本文所提出的方法可以将单帧图像转换成一段高质量的视频,并且具有通用性。本文的主要贡献有以下三点:1)本文首次提出了一种通用且创新的算法,将视频的时空信息嵌入到单张视频快照中,且该视频快照可以反向输出为更加平滑的长视频。2)本文提出了一个运动注意力模块,以帮助运动嵌入网络专注于视频中的运动区域,从而丰富了需要学习的时空特征中的运动信息。3)本文设计实现了一个插帧网络,可以预测两个连续帧之间任意时间步的光流,进而生成帧率更高,播放更平滑的视频预览。
其他文献
自由空间光通信(FSO)普遍被认为是解决“最后一公里”问题的首选方法,它具有传输速率高、功率能耗低、频带宽和方便部署等优势被国内外科研人员认为其应用潜力巨大。随着人们
磁斯格明子(magnetic skyrmion)作为一种奇异的拓扑自旋结构,凭借纳米级准粒子特性以及低电流驱动密度,有望成为新一代赛道磁存储器件的信息存储单元,近几年已成为磁学领域研究
随着社会新型风险的增多和风险刑法理论的推进,抽象危险犯作为危险犯的一种,因其能够对法益提供更为提前的保护而越来越受到各国立法者的青睐。以我国为例,《刑法修正案(八)》和《刑法修正案(九)》便大量采用了抽象危险犯的立法模式。不过虽然抽象危险犯相对简易的认定过程有利于更好的管控风险,但是也蕴藏着侵犯公民自由的风险,现如今抽象危险犯便存在着范围过宽和重刑化的问题,为了使得刑罚的公平正义之剑挥向正确之处,
学位
现如今,随着数据存储的需求日益提升,存储系统规模的增大,存储设备失效的风险也随之提升。能容忍三磁盘同时失效的存储阵列因而被广泛采用,这类存储阵列通过采用纠删码技术来
随着科技的发展与进步,人工智能的浪潮席卷全球,使得生活变得更加智能化。其中,人机交互则在其中起着重要的作用。手势识别作为人机交互中最简单自然地一种方式,引起广泛关注。而基于视觉的手势识别不依赖其它设备,操作更加自然方便。实际场景中的手势识别系统通常对于实时性和准确率有较高的要求,因此如何在保证算法正确性的同时,提高算法的实时性是研究的关键。针对视频流中手势特征描述困难以及在视频序列中存在较多冗余信
随着城镇化进程的不断推进,城市建设日益受到重视,城市轴线作为城市形态的重要元素之一,对其探讨具有十分重要的现实意义。在历史的进程中开封形成了数条城市轴线,这些轴线在
同步通信卫星的干扰源定位是国家无线电监测中心的重要工作职责之一。随着国民经济的发展,卫星通信变得越发重要,卫星通信用户也日益增多,这给卫星干扰定位带来了新的挑战。新的发展趋势给定位工作提出了新的需求:更高的成功率;更快的定位速度;更高的定位精度。卫星干扰源定位要获得良好的定位精度,需要足够的参考源对定位参数进行校准。这一校准过程能够将定位精度从几百公里提高到几公里的级别,因此,设计和实现高精度的扩
在环境危机和能源短缺日益严峻的今天,太阳能和风能等可再生能源的开发受到全球范围的广泛关注。近些年,在我国政策的大力扶持下,光伏发电产业得到高速发展,光伏电站的规模和
随着人工智能的快速发展,手势识别作为新一代的人机交互技术得到了广泛关注。传统的基于可穿戴设备的手势识别技术需要使用者佩戴专有设备,无法在电量较低时使用并且容易造成
随着信息化技术的高速发展,我国的教育信息化工作也于20世纪90年代开始展开,并在基础设施建设、数字内容建设、远程教育、个性化教育等方面取得了快速的发展。在教育信息化中