基于全景相机组的立体视觉系统设计与实现

来源 :东南大学 | 被引量 : 3次 | 上传用户:epaiai009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前虚拟现实(Virtual Reality,VR)技术发展迅猛,可以应用于各个行业,比如购物,影视,游戏等行业。当前市场上的大多数制作虚拟现实场景的算法都是以拼接算法为基础,拼接算法应用于生成具有立体信息的VR全景需要耗费大量的硬件及软件计算,它在实际使用时的成本是非常巨大的,而且拼接算法总会产生部分拼接失败的细节场景。因此,本文设计实现了 VR全景环形立体视觉视频系统,以此实现以全景环形镜头为基础的视频观看体验,能够直接获取较大范围的立体信息,给用户带来全新的观影感觉。本文使用的硬件是两个全景环带镜头,通过对两个矫正的环状图像进行立体匹配获取立体信息,优化算法加快运行速度,使用快速加权滤波优化立体信息,通过立体信息恢复另一只眼睛的图像,最终设计与实现了VR全景环形立体视觉视频系统。本文的主要工作包括:(1)视频采集模块开发:使用VS2013开发工具结合Qt5以及环形镜头SDK实现对环形镜头的控制,制作镜头控制软件。软件的基本功能包括连接镜头,开启镜头获取图像,停止镜头获取图像,截图,录像,白平衡,自动曝光,开启直播,停止直播。(2)图像算法处理流程设计与实现:实现了对获取环形图像后进行矫正,立体匹配,滤波,重映射,补全空洞,相比于业界已有的拼接图像获取全景方式,本文的方式能够更加快速地得到较精确的深度图像,在深度图像和原始环形图像基础上进行重映射得到双眼视觉图像,得到良好的视觉体验。(3)接收视频端应用的设计与实现:实现了佩戴3Glasses公司的虚拟现实头盔D2,进而观看直播推流过来的全景视频功能。该接收端应用包括眼球模型的制作,直播流的解析,3Glasses SDK的接入,协同实现虚拟现实头盔控制观看影片,从而能够得到相应的体验。(4)对整体视觉系统的测试:测试了系统功能模块和系统性能,验证了系统功能的鲁棒性,对之后的性能改进提供了展望。本文对基于全景相机组的立体视觉系统进行了测试,结果显示系统能够快速正常地运行展示360°立体画面。本文所设计实现的系统探索了利用双全景镜头生成立体全景画面的新方法,相比拼接生成全景的方式更加快速且没有拼接产生的场景违和感,为未来的全景环形镜头直播方案迈出了关键性的一步。
其他文献
目的 :观察茶多酚对人细胞因子诱导的杀伤细胞 ( CIK细胞 )杀伤肿瘤细胞活性的影响和诱导人胃癌细胞株 ( SGC- 790 1 )凋亡和死亡的作用。方法 :在体外用不同浓度的茶多酚与
10月31日,习近平总书记在中共中央政治局第九次集体学习时强调,要充分发挥我国海量数据和巨大市场应用规模优势,坚持需求导向、市场倒逼的科技发展路径,积极培育人工智能创新
<正>文晏的第二部故事长片《嘉年华》(Angels Wear White)入围2017年威尼斯国际电影节的主竞赛单元,并引发高度关注。《好莱坞报道》(Hollywood Reporter)、《综艺》(Variety
目的研究糖皮质激素、硫唑嘌呤、乙酰半胱氨酸三药联合治疗特发性间质性肺炎的临床效果。方法遴选住院治疗的特发性间质性肺炎患者46例,依据随机原则,分为观察组及对照组,每
介绍了我国超磁分离净化技术与当前污水处理厂实际运营相结合的情况。发现在进水污水量大于污水厂处理能力的情况下,使用超磁分离水体净化技术可以有效解决污水厂尾水成为黑
“‘爱我中华’中国画、油画大展”,强调群众性、参与性,得到全国各地美术家和广大美术爱好者的热烈响应,报名参加者有数千之众。这说明大众对自身文化艺术活动的关注,?
报纸
《游戏规则》:这个世界最糟糕的地方,就在于每个人都有自己的理由。$$说片如其人,文晏无疑是最好的例证,清冷、自持,严守自己既定的节奏与方向。将她的电影、她的访谈对照着
报纸
目的:对应用安全护理模式对患有重症肌无力疾病的患者实施护理的临床效果进行研究。方法:将某院收治的82例患有重症肌无力疾病的患者随机分为对照组和观察组,平均每组4l例。采用
9月1日,第四届中国—亚欧博览会隆重开幕。在新疆国际会展中心5号展馆纺织服装产业馆,满眼仿如色彩缤纷、时尚新潮的服装服饰海洋,“多彩民族、多彩时尚,让绚丽多姿的民族服