- 0
- 0
- 1
分享
- 迪士尼小镇“超体空间SoReal VR”:边缘计算+5G应用打造全沉浸式VR体验
-
2023-02-02
“迪士尼小镇超体空间SoReal VR在西游主题基础上,融合了SoReal在VR、5G、AI和边缘计算等前沿创新科技领域的积累,为游客带来了别开生面的科技艺术体验。我们希望与英特尔等伙伴持续拓展VR领域的合作,在解决XR乐园面临的棘手技术挑战的同时,为乐园体验注入全新活力,让游客能够尽享全感官沉浸式娱乐体验。”当红齐天董事长齐笑说道。
坐落在迪士尼小镇的 “超体空间 SoReal VR” 是由当红齐天打造的大型全沉浸式XR体验项目。该项目以西游IP为主题贯穿体验全程,提供了3款大空间行走多人沉浸式VR互动体验,6大XR创新载具体验,以及沉浸式艺术空间光影秀,并集合了新型社交餐饮、潮流艺术购物等空间,满足到访游客的多种娱乐体验需求。
XR带来了远超传统娱乐形式的沉浸式互动体验,但XR内容渲染、内容管理、项目运营等环节也带来了算力和成本等挑战。为了应对这些挑战,给消费者带来更佳的XR体验,同时充分释放数据价值,当红齐天在超体空间SoReal VR中采用了基于英特尔®架构的5G边缘计算方案,不仅能够实现XR内容的高效渲染,提升XR项目的互动效果与用户体验,还在游客洞察、游客准入等运营管理环节提供了智慧算力,加速XR项目商业价值的挖掘。
颠覆式体验的背后,XR乐园方兴未艾
作为元宇宙的关键基础技术与应用,XR被普遍认为是游戏娱乐的重要发展趋势。XR能够通过VR/AR图形生成与显示、多重传感与映射、动态环境建模、实时动作捕捉、快速渲染处理等技术,营造出具备沉浸感的虚拟化世界,并能够与现实世界进行某种程度的交互。对于用户而言,XR能够带来全新的娱乐体验,并有望重构未来人与数字化的连接方式。
为了打造顶尖的XR娱乐体验中心,当红齐天推出了全球首座在迪士尼度假区内运营的大型XR项目:超体空间SoReal VR。该项目以西游IP为主题贯穿体验全程,共分上下两层。一层包含西游降魔-起源之战、天宫竞技场-量子冲突、齐天幻境、奇境历险记、疾速空间等3款大空间行走多人沉浸式VR互动体验及6大XR创新载具体验。二层为奥运会主创团队重磅打造的以“齐天大圣诞生,纵览世间百态,顿悟成佛”为主线的沉浸式艺术空间光影秀。
迪士尼小镇超体空间SoReal VR
XR乐园是一个尚处于萌芽期的产业,鲜有成熟的方案与经验可以借鉴。在建设、运营XR乐园的过程中,企业将面临许多已知与未知的挑战。作为中国第一批深耕XR技术领域的代表公司,当红齐天在内容创作、开发引擎、商业业态上已占据行业制高点,在大型线下XR乐园的设计、制作与运营中积累了丰富的经验。当红齐天重点针对XR乐园行业存在的痛点,进行技术创新探索:
XR设备过于笨重,体验不佳:为了提供画质更佳、沉浸感更强的XR游戏与娱乐内容,传统的XR服务提供商往往会通过VR背包等方式,使用本地的终端来进行渲染,这种方式虽然算力强大,但是佩戴感受较差,会对消费者行动带来较大限制。
游客通行流程繁琐,效率较低:在游览之前,XR乐园需要验证游客身份以及门票购买状态。传统的乐园采用纸质门票等方式,效率较低,在高峰期还容易造成人员拥堵,影响用户游览体验与安全运营。超体空间SoReal VR采用了电子手环的方式来进行验证,并实现视觉辅助去重,以及视觉识别通行,以提升乐园运营效率和游客通行安全。
游客数据难利用,无法支撑精细化运营管理:游客人数、游客特征、在每个游乐项目的游玩时长、排队时间等数据对于乐园运营至关重要。对于这些数据的深入洞察有助于企业有针对性地改善运营效果。但是,这些数据大部分属于非结构化数据,难以通过传统的方式进行挖掘。当红齐天希望采用大数据、AI等技术,从海量数据中提炼有价值的洞察。
英特尔®技术提升XR乐园智慧运营能力
针对迪士尼小镇超体空间SoReal VR建设与运营中的各种挑战,当红齐天与英特尔、小钴科技、新昱等合作伙伴携手,构建了基于“云(云计算)-网(5G)-边(边缘计算)-端(终端)”架构的智慧XR平台,实现了游客无感通行、精细运营管理、边缘媒体渲染等,提供了出色的XR游览体验。
迪士尼小镇超体空间SoReal VR智慧运营系统架构图
1.利用5G+边缘计算加速VR内容渲染
如上文所述,在传统的VR体验项目中,玩家往往需要佩戴沉重的VR背包,或使用线缆连接VR头显与后端VR设备,用户体验不佳。而在迪士尼小镇超体空间SoReal VR中,玩家只需戴上轻便的VR头显便可轻松探索无界虚拟世界,而且眩晕感趋近于零,给玩家带来身临其境的逼真视效。
迪士尼小镇超体空间SoReal VR提供精彩的VR游戏体验
玩家体验颠覆式升级的秘诀在于5G与边缘计算技术的应用。在边缘端,超体空间SoReal VR采用了搭载第三代英特尔®至强®可扩展处理器的5G SoReal XR边缘服务器进行VR内容渲染。该处理器在计算、网络、存储和持久内存中带来了创新和硬件增强的虚拟化特性,提供强大的算力,结合专用加速器,能够支持多路VR游戏渲染。服务器新增了PCIe 4.0支持,并提升了内存带宽,每路处理器内存容量高达6TB,解决了VR内容渲染对高性能与高带宽的需求挑战。
对于VR乐园而言,稳定性是重中之重。面对软硬件产品的不断更新换代,选择可预见的、可移植的软硬件平台成为系统选型的重要条件。第三代英特尔®至强®可扩展处理器在保持了与上一代产品的一致性和兼容性的同时,还针对多种工作负载类型和性能水平进行了优化,提供了强大的可扩展性。此外,处理器中内置的英特尔®软件防护扩展(英特尔®SGX)可从边缘到云端,实时保护数据和应用代码,有力地提升了VR数据的安全性。
迪士尼小镇超体空间SoReal VR利用5G专网能力,将VR乐园中需要的大量三维场景计算需求下沉至5G SoReal XR边缘服务器,融合先进的硬件加速技术,对视频、图像进行本地实时化处理,可以为用户提供高性能的图形渲染服务,将渲染后的场景编码回传给VR终端,降低了对VR硬件设备的要求。同时数据本地处理,不用经过传统核心网,将VR渲染业务进行本地就近分流处理,更接近用户终端,可以缩短网络时延,提升响应速度,出色地解决了VR游戏中的模糊、眩晕问题。此外,该方案还提供了基于MEC的无线准专网能力保障,带来出色的竞技和观看体验。
5G SoReal XR边缘服务器还采用了基于Open WebRTC Toolkit(OWT)的串流算法,以降低网络传输负担、提升网络传输效率。OWT能够降低实时视频编码、转码所需要的计算资源,实现实时视频互动和视频分析。
在5G SoReal XR服务器完成渲染之后,超体空间SoReal VR将利用5G技术超高速、低时延的网络连接能力,实现服务器与VR眼镜的互动,将时延降低至毫秒级,有效提升用户的VR体验。
边缘服务器系统框架
“5G、边缘计算是XR乐园运营的重要技术驱动力。通过融合5G与边缘计算技术,我们能够就近处理XR内容渲染、AI推理、视觉数据分析等负载,并通过5G网络构建边缘端与终端的高速数据通道。这种方式不仅降低了数据处理时延,还提升了整体服务的稳定性,为用户带来更高品质的体验。”当红齐天研发总监黄伟超说道。
2.实现无感通行,提升智慧运营能力
游览迪士尼小镇超体空间SoReal VR是一项轻松的体验,这在一定程度上是由于其实现了无感通行。游客不用排队验票,可以通过手环、生物特征识别等方式进行快速验证,提升了通行效率。同时,SoReal VR所采集的视频数据也用于游客安全管理,便于快速处置各种安全隐患事件。
SoReal VR利用小钴科技智能门禁来助力无感通行。小钴科技智能门禁整合了小钴科技的生物特征识别算法,能够支持智能出入管理,在增强游客通行安全的同时提升了消费者的便利性。小钴科技生物特征识别算法在强光、低光、背光等不同环境下均可精准识别生物特征,能够有效应对当前生物特征识别技术的重大挑战。相对于以往2D生物特征识别在安全性和使用适应性等方面的局限性,真3D生物特征识别技术通过采集3D深度信息,不仅能够实现活体防伪,还可有效防止电子照片、电子视频、3D硅胶面具等伪装攻击,误识率达到百万分之一,实现更高安全等级的防护。
智能门禁等设备采集的视频数据将传输到基于英特尔®架构的视频AI计算盒和网络视频录像机(NVR)中,以加速视觉数据的处理与分析。英特尔®视频AI计算盒不仅能够高效处理视频采集、串流、录制、显示等传统视频工作负载,还能够集成各种AI算法,并通过OpenVINO™工具套件优化AI性能,实现基于深度学习的视频分析。OpenVINO™工具套件基于新一代的人工神经网络,包括卷积神经网络(CNN)、递归网络和基于注意力的网络,可跨英特尔®硬件扩展计算机视觉和非视觉工作负载,有助于对于多路视频数据进行高效AI推理。基于英特尔®架构的NVR则通过英特尔®酷睿™处理器管理大量的网络摄像机(IP Camera),实现高密度串流、视频存储及数据管理等。
超体空间SoReal VR还使用英特尔®视频AI计算盒实现游客到访数据的洞察。方案能够根据游客等待时长统计、排队人数、体验时长等数据,生成游客热力图,辅助优化空间设计与动线布局,提升门店空间利用率。此外,计算盒还能够根据历史数据建立模型,实现对项目体验人群的精准预测,结合当下的外部环境、内部运营等综合要素,提供智慧化的经营指导。
3.打造酷炫的光影秀内容交互
迪士尼小镇超体空间SoReal VR的二层为奥运会主创团队重磅打造的沉浸式艺术空间光影秀。光影秀通过绚丽、自由的视听表现与实时互动,创造出四种空间状态的转化,以别具一格的艺术表达形式呈现齐天大圣由诞生到顿悟的过程。
迪士尼小镇超体空间SoReal VR光影秀
为了营造更加出色的互动体验,光影秀的走廊布设有大量的互动屏幕,这些屏幕能够捕获游客的表情、形态等3D特征,最终形成超大的点云图,与游客进行实时互动。为了实现这一目标,超体空间SoReal VR采用了英特尔®RealSense™技术来捕捉三维深度数据。英特尔®RealSense™技术赋予设备观看、理解、交互以及从环境中学习的能力,可在摄像头支持的整个视野范围内提供高度准确、一致的深度数据。
在超体空间SoReal VR中,英特尔®RealSense™技术结合英特尔®酷睿™处理器的算力,进行点云数据处理与特效渲染,并最终生成可与游客进行互动的点云3D图像。
除了光影秀之外,超体空间SoReal VR还采用基于英特尔®视频采集设计 (Video Capture Design) 的新昱科技幂视系列媒体处理系统来提升游客的互动体验。该平台具备高效的媒体、声光电及物联融合处理能力,最大单机可支持20个HDMI输入、40个HDMI协同输出能力和20路高保真音频输出,通过交叉同步矩阵式背板,可以实现所有输出的精准同步。其同时支持各种物联控制网关来驱动光影和舞台周边相关设备的协同工作,更具备图形化人机界面,可以对所有媒体和智能设备进行多轨非线性组合编辑,有效提高了内容创作者的工作效率,使创作者可以专注于享受内容创作的淋漓快感,快速生成各种光影秀和沉浸式的多维展览展示内容,并可根据用户需求进行切换和实时节目点播。
新昱科技幂视系列媒体处理器为VR沉浸式游戏大厅提供了完整的技术解决方案。通过精准同步控制多个LED大屏、穿戴式VR显示设备、12.1环绕高保真音响系统和动态场景灯光系统,处理器能够实现同步显示、同步联动、同步响应等多系统复杂集成控制功能,为游客提供沉浸式闯关体验和多人VR游戏对战,带来无与伦比、新鲜刺激的震撼体验。除了可以驱动多个互动大屏异步显示不同内容外,新昱科技幂视系列媒体处理器还可根据声音内容和节奏,同步驱动控制多个3D透明球面显示设备和多声道环境音响。
新昱科技幂视系列媒体处理器提供沉浸式VR体验
新昱科技幂视系列媒体处理器利用了第11代英特尔®酷睿™处理器强劲的算力支持视频墙的创建,并通过英特尔® oneAPI视频处理库(英特尔® oneVPL)实现硬件加速,提升视频转码、图像处理和媒体工作流程的速度。新昱科技幂视系列媒体处理器还采用了英特尔®视频综合处理平台(Video Processing Platform,VPP)所搭载的先进技术,加速视频采集、编解码和显示,以及视频拼接、分割、流式传输、AI推理等负载处理效率。
目前,迪士尼小镇超体空间SoReal VR已经迎接了一批又一批的游客,不仅提供了创新载具体验、大空间自由行走多人沉浸式VR互动体验,还以富有创意的璀璨光影与实时互动设计、特效造型装置、3D扫描与全息成像等技术营造出沉浸式体验,唤醒游客心中的 “齐天大圣”。
(来源:中国青年网)
-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本文内容由数艺网收录采集自微信公众号世界VR产业大会 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。