- 0
- 0
- 0
分享
- 看看我们用NOTCH做了什么?
-
原创 2020-09-08
本文来自于微信公众号:Goaheadlab
视频是运用XR扩展现实技术制作的实时渲染实验性短片”武侠Swordsmen“
01、扩展现实技术ExtendedReality(XR)
此次短片制作的整个工作流程中ncam摄像机追踪结合摇臂实时追踪LED屏幕,加上Notch实时渲染,并嵌入到 hecoos系统中保证不同角度空间的立体性和真实感。在3D效果和前景AR效果双重加持下演员和特效影像虚拟互动、镜头和场景实时变化贯穿始终,实现无缝集成并达到增强现实的效果.
虚拟空间对于演员的表演和导演的控制是最大的挑战。现场用LED搭建了一个CAVE盒 ,比起绿幕拍摄,在 LED 屏幕环境下可以呈现出最真实的色彩和环境光状态。不同于以往,还在CAVE的顶部增加了天屏,给演员增添了沉浸感以及添加了面光。
虚拟引擎(Notch)为我们带来最为便捷的革命,则是“所见即所得”,将演员置入其中,体验式的沉浸式表演,将演员的表演随意地带入任何一个空间,呈现一种相对自由的表演创作。
强大的虚拟引擎以足够快的速度生成一系列图像以实现实时交互.实时渲染的目标是匹配显示器的刷新率,使视觉效果可以完美的现场化和实时化。
在有限的摄影棚空间中,虚拟引擎的摄影机运动与物理空间里的摄影机运动达到交互和统一。叙事空间和表演空间任意转换,拍摄角度的任意调整,可以创造无限的空间。
NOTCH渲染引擎
hecoos服务器
Ncam mark1
BlackTRAX - 6 camera + 4 sensor
Notiom-Perception Neuron Studio
4块立⾯面P3 LED屏幕
9米摇臂
02、Notch绿幕扣像
西门子家电联合天猫小黑盒举行了全新西门子酒饮美妆多门冰箱的首发仪式。本次直播的最大特点是运用了沉浸式AR全景直播,并通过Notch实时渲染进行内容的制作、以及对人物实时跟踪定位以及扣像。
西门子&天猫小黑盒直播首发仪式花絮
绿幕抠像是Notch的最新功能,这也是国内第一次商业应用。将用于影视拍摄的绿幕与直播结合,打破以往直播画面单调的形式,拓宽了直播创意的边界,为未来的直播微综艺、直播轻情景剧等创意形式提供了更多发挥的思路和空间。
在有限的时间和预算范畴内,我们将墙面刷成了绿色,使其成为一个拥有绿幕环境的摄影棚,现场放置了西门子最新的冰箱。但冰箱的本身是极易的反光的材质,这给现场扣像带来了非常大的难度.与此同时,不光得兼顾冰箱材质的反光,还有现场所有在冰箱中所要呈现的物料(红酒,化妆品等)的材质,这些都大大增加了现场扣像的难度.好在Notch最新的chorma keyer能解决这一问题,并且可以完美的处理现场人及物体前后景别的关系.
实时渲染技术可以直接还原画面效果的精细度以及真实感,使用逼真的阴影/光照模型与测得的材质参数值一起准确地表示真实的材质的质感。
Notch实时渲染技术进行内容制作,搭配Disguise xR技术组成的整套系统是整个活动的核心。Notch与Disguise xR技术相结合,实现无缝集成,通过Disguise服务器全部功能的支持与控制,实现跨多台同步机器实时渲染,解决了在绿幕环境下冰箱的镜面反光。
chorma keyer杜绝以往绿幕直播讲解环节的“前后割裂”“向后互动”的尴尬. 让主持人将产品3D影像、参数关键词、图文视频,呈现在主讲人的身前和身边,并与主讲人的动作走位随时互动,实现了多层虚拟影像前后景的关系。
直播中我们利用技术虚实结合优势,将主讲人上场与虚拟动画完美结合,避免主讲人走上台中的割裂场景。让主讲人在动画契机中,自然现身。
全新玩法和时代已然来临。从VR、AR到MR、XR,技术的发展让现实世界与虚拟世界的界限越来越模糊,重塑人与时空的距离和关系,呈现无限可能。
-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本文内容由数艺网收录采集自微信公众号Goaheadlab ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。
NOTCH 扩展现实技术 虚拟互动 沉浸式AR全景直播 西门子