基于OpenGL的交互式全景视频显示系统

随着虚拟现实和多媒体通信技术的快速发展,全景视频作为一种新兴的数字媒体,凭借其良好的临场感和沉浸感在影视娱乐、教育教学、工业仿真、医学研究等众多领域取得广泛应用。为了更好地开展全景视频的相关研究,建立交互式的全景视频显示系统成为了优化和完善全景视频业务的重要前提。本文基于OpenGL渲染技术,结合用户对于全景视频交互操作的需求,搭建了交互式全景视频显示系统,并在该系统上通过实验分析了本系统的交互时延和视频分辨率、帧率的关系。实验结果表明,交互产生的时延和视频分辨率、帧率的大小呈正相关关系。在本平台的设置下,交互产生的时延不超过0.02s,为用户提供了良好的交互性和视觉体验,为全景视频的相关研究与应用开发提供了稳定的平台。     

5G+VR融合制播技术应用

本文详细介绍了中央广播电视总台5G+VR融合制播系统面向虚拟现实视频生产的创新应用场景,并结合2017-2021年总台春节联欢晚会VR节目制作形态,从技术角度着重分析了该系统的设计开发和融合制播实践情况.具体内容涵盖VR视频采集传输、多机位切换、实时全景在线包装、VR网络交互制作模式(VNIS)、沉浸式三维声制作、新媒...     

基于HTC Vive的全景视频显示质量评估

近年来,科技界掀起一场"虚拟现实"风暴,给人们带来了前所未有的视听体验。全景视频作为虚拟现实的主要构造方式之一,凭借其良好的用户体验与人机交互性被广泛应用于医疗、娱乐、教育以及工业设计等诸多领域,在一定程度上改变了原有的生产设计方式。与此同时,用户对于全景视频视觉体验的要求也日益增长,如何为用户提供良好的全景视频视觉体验已成为近年来相关领域的研究热点。本文以HTC Vive平台为基础,结合虚拟现实技术相关指标以及用户对于全景视频视觉体验的要求,搭建了全景视频显示系统,并在此平台上通过主观实验分析了渲染全景视频时的球体网格面片数与全景视频主观质量之间的关系。实验结果表明,对于分辨率为720P、1 080P以及4K的视频,当面片数小于64时,视频的主观质量与面片数量成正相关关系;当面片数超过64后,视频主观质量方可由其自身参数所决定。本文中所搭建的全景视频显示系统以及文中相关结论可为后续有关全景视频的研究与应用开发提供有效的建议。     

面向网络视频的三维全景展示技术*

针对当前网络视频形式单一、缺乏多元化的视频形式展示的问题,结合三维全景展示技术,提出了面向网络视频的三维全景展示技术系统方案。重点分析了系统方案中的全景图拼接技术以及基于Flash视频技术的三维全景展示技术,并给出了一个具体的网络视频的三维全景展示示例,实现在互联网上逼真的展示三维场景。该方法能通过Flash脚本编程将图片、视频、音频等有机地结合起来,为网络视频用户提供三维全景与用户交互,使用户获得更好的网络视频体验。     

基于Unity3D技术房地产虚拟漫游系统的设计与实现

随着时代的发展,虚拟现实技术在各领域都有着广泛的应用。设计一个房地产虚拟漫游系统,主要采用3ds max建模软件建立模型,导入Unity3D游戏引擎进行场景规划、制作,再进行一些交互设计,最终达到预期效果。     

基于VR的校园地震逃生沉浸式交互体验系统构建

地震灾害在我国频繁发生,国家及教育部门十分重视在校园内科普地震逃生知识,而传统的地震逃生演练活动真实感低,开展活动的成本高,活动开展效果也不佳,因此,文中提出了基于虚拟现实(Virtual Reality, VR)的校园地震逃生沉浸式交互体验系统构建。该系统利用计算机结合Unity3D平台来实现,首先,利用3ds Max软件进行场景建模;然后,通过给Unity3D平台导入SteamVR和VRTK插件来开发一个集虚拟场景、动画、声音、视频、交互于一体的校园地震逃生体验系统;最后,连接HTCvive设备来实现用户与虚拟环境的响应。本系统的开发不仅解决了传统演练沉浸感低的问题,还通过新颖的VR技术激发人们对地震逃生知识的学习兴趣,除此之外,还节约了开展地震逃生演练活动的成本,对地震应急救援有较好的应用价值。     

3D立体图文的制作与展示技术

近些年来,随着3D立体显示技术的快速发展,相关硬件设备的逐步普及,市场对3D视频的编辑需求也在逐步上升。3D立体图文编辑作为3D视频编辑的重要组成部分,从最初的简单图文叠加,到目前虚拟三维场景与实际视频场景的完美融合,3D立体图文渲染技术结合智能交互技术,在多媒体交互展示方面也有着广泛的应用。     

场景设计在多媒体作品丹瑅小馆的应用

多媒体作品《丹瑅小馆》是通过虚拟现实的交互体验,让同学们了解《丹瑅小馆》.虚拟现实技术是当今计算机科学研究的一个热点,是一项涉及计算机图形学、人机交互、人工智能等学科的综合技术,与传统场景设计课程不同,本课是利用计算机生成一个逼真的三维感官世界,给观众以如同真实世界的体验.场景设计在虚拟现实体验中有着不可替代的重要性.从场景的搭建,物体的建模,材质的选择,贴图的整理,到灯光的设计做到与真实的“丹瑅小馆”一摸一样,甚至美化或艺术效果更强,成了本次场景设计的核心内容.采用3D-max技术制作的场景,针对职业教育的教学方式,提高学生的学习兴趣,本课是更加适合职校学生的一种教学模式.     

基于VR的虚拟现实评标可视化系统设计

为了提供线上电子招标操作平台,提高电子招标文件浏览和评标的速率,提高评标过程体验,增加用户沉浸感,文章设计一套基于VR的虚拟现实评标可视化系统,利用虚拟现实技术在三维场景下进行电子评标。主要使用Unity3D来完成整体框架设计,SteamVR及HTC VIVE硬件设备来完成对虚拟现实下的交互功能。此系统可以帮助评标专家在虚拟现实场景下,使用VR手柄来完成对评标文件的评审、打分及分数可视化,帮助提高评标效率。     

分享我们的世界——全景3D动画+真人制作

魔D工作室隶属上海东方传媒技术有限公司,长期致力于数字影像内容制作,提供4K、3D影视剧前后期制作全流程解决方案.工作室自成立以来秉承先进影像技术服务艺术创意的理念,其对VR的制作已有初步的实践,已完成了对于整个全景制作的流程的探索. 全景视频对传统视频制作带来的巨大改变 全景视频的出现,给传统的视频制作流程带来了巨大的改变.传统的观影,观众安静、专心地坐在座椅上,周围是黑暗的,观众只需专心看屏幕即可.     

智慧家庭的VR全景视频业务实现

全景视频作为一种新的视频格式极大程度地改变了用户观看视频的方式,可以提升智慧家庭在视频领域的用户体验。IPTV良好的解码能力以及优异的网络支撑等优势对全景视频的应用推广具有积极作用。结合VR全景视频的特点,分析了超高分辨率全景视频在IPTV平台中的技术挑战,同时基于FOV视点自适应框架,结合MCTS编码、多分辨率和多tile视频分发和终端根据视点部分解码tile技术,给出一种IPTV超高分辨率全景业务实现方案。     

Virtual Stage: a location-based karaoke system

Virtual Stage is an extended karaoke system based on virtual reality technology. A participant becomes the main character in an interactive music video. While singing along with the song played by Virtual Stage, the participant uses body movements to interact with the virtual characters, which reside in a virtual environment and behave intelligently. In Virtual Stage, the participant's video image, grabbed by a video camera, is composited with the rendered image of the 3D virtual environment. Participants will see the realistic video image of themselves and get a false feeling of immersion, as if existing in the VE     

Virtual view synthesis using joint information from multi-view

Immersive media has attracted widespread attention with the development of virtual reality. Three Degree of Freedom Plus media greatly enhances the user experience by allowing users’ head motion and viewpoint switching within a certain range. Due to the limitation of panoramic video acquisition and transmission, it is impossible to obtain videos from any viewpoint directly. Virtual view synthesis is the general solution to this problem. However, existing algorithms do not adequately consider the pixel correlation between multiple views. Thus, we propose a virtual view synthesis algorithm using joint information from multi-view panoramic videos to further explore the pixel correlation. Specifically, sub-pixels from different reference views in the virtual view are obtained by performing multi-view three-dimensional image warping. Dedicated area division and interpolation methods are then designed to improve the synthesized quality. Experimental results show that the proposed algorithm outperforms the state-of-the-art virtual view synthesis algorithms in performance and efficiency.     

基于AR技术的虚实图书

虚实图书是将增强现实技术应用于传统图书的一种新型出版物,与各种电子书存在区别.虚实图书使用的AR技术利用移动终端,借助对真实图片的识别,在数据库中获取虚拟信息,并将虚拟信息叠加于实际图片,实现虚拟信息对现实的增强.虚实图书颠覆了传统的纸质版图书,在阅读时不再像传统读物只是阅读纸质书本的内容,还可以看到移动终端上显示的虚拟的信息,包括视频、3D模型等等,给读者带来全新的阅读体验.     

基于虚拟现实的三维建模技术的研究

随着VR（虚拟现实技术）的快速发展,三维建模技术在其中发挥着重要的作用,是虚拟现实技术的核心。本文研究探讨了VR技术和三维建模技术,以及建模软件3D MAX,还对VRML语言进行了分析论述。     

基于AR技术的实时互动体验电商系统

电商已经不仅仅满足于线上的商品交易,越来越多地开始关注于线下用户体验的改善.本文以虚拟试鞋为切入口,借助于Kinect硬件设备和3d Max、unity3d软件平台,提出并搭建了基于AR增强现实技术的实时互动体验电商系统.本文对该系统的关键技术进行阐述,包括三维模型的跟踪定位、手势交互和RGB-D抠像.该系统综合应用三维场景虚拟化、三维互动识别以及增强现实融合等技术,硬件成本和算法复杂度低,操作简单,适用于新型电商利用AR技术对品牌进行线上展示和线下用户体验.     

基于视角方向的全景虚拟视图合成

针对3DOF+视频搭建了一套基于视角方向的全景视频虚拟视图合成系统,利用极少视点位置的视频信息即可准确渲染任意视点位置的视频内容,从而为用户提供真实的观看体验。将所合成的新视点位置视图与相机采集的真实视图进行比较。实验结果表明,所合成的虚拟视图平均客观指标PSNR为23dB左右,主观质量良好,较为真实且能够提供良好的交互性与视觉体验。     

基于全景虚拟现实技术的科普系统

本文设计了基于全景虚拟现实技术的科普系统架构及功能框架.主要针对现实中的科普植物对象进3D建模,并进行三维全景展示,实现一个基于Web3D的科普系统.     

虚拟现实与人工智能的融合研究

虚拟现实是一种综合集成技术,其涉及计算机图形学、人机交互技术、传感技术和人工智能技术等,在其应用过程中需要以极高的计算能力来形成真实性较强的图形,从而让人类参与其中,形成真实的交互体验。虚拟现实技术已经成为人们关注的重点,其持续性的创新与合理的应用,会对当前的经济社会产生深远的影响。文中对虚拟现实技术与人工智能技术的融合进行了分析,以期对该技术的进步提供一些参考。