- 0
- 0
- 0
分享
- 人工智能技术助力实时虚拟角色制作提质升级
-
原创 2020-05-25
本文来自于微信公众号: 电科动态
丨>>>> 【本期内容】 <<<<丨
❉Faceware基于深度学习技术实时创建高品质虚拟角色动画
❉新华社联合搜狗推出3D版AI合成主播用于新闻播报
❉CinemaNext向影院发送放映设备DCP测试包
❉LG注册LED电影屏商标LG LED Cinema
【点睛】
近年来,影视娱乐行业实时虚拟角色应用愈来愈广泛,虚拟偶像、虚拟主播等不断推出。为让角色更加逼近真人,不少虚拟角色在制作过程中不仅对角色原型实施精细的面部和身体动作捕捉,还应用人工智能技术优化提升虚拟角色质量。就目前商用的非卡通类虚拟角色而言,角色细微表情和唇音同步尚存不足,需加强模型训练和迭代升级,使虚拟角色更加逼真。
Faceware基于深度学习技术实时创建高品质虚拟角色动画
近日,专注于无标记点面部捕捉系统的Faceware公司推出了最新面部捕捉和动画制作软件Faceware Studio,全面替代其前一代产品Faceware Live Server。
Faceware Studio基于深度卷积神经网络(DCNN)模型实现高质量虚拟角色面部动画实时创建,用户只需一个摄像头或头戴式摄像设备即可完成数据采集工作,随后软件平台完成人物面部动画的实时校准、跟踪、生成,并将数据流实时送入UE4、Unity、Motion Builder等软件(未来还将支持Autodesk Maya)。制作人员还可根据需要利用配套的Motion Effects工具对生成的动画形象进行调整。
Faceware Studio基于TensorFlow和PyTorch深度学习框架,应用了深度卷积神经网络模型,并使用Faceware团队创建的训练数据集和现有机器学习库实施训练,通过对人物下颌的精准跟踪、预测和定位,结合人物口腔内部牙齿咬合规律,大幅提升唇音同步(Lip-Sync)的精确性,即使在人物面部存在遮挡唇部和下巴的情况下,软件仍然能够根据大量前期训练模型生成合理的下半部面容,为后续唇音同步计算过程提供依据,从而制作出逼真的人物面部数字形象。
新华社联合搜狗推出3D版AI合成主播用于新闻播报
近日,新华社联合搜狗公司推出了3D版人工智能(AI)合成主播“新小微”,用于在全国两会期间量化生产新闻播报视频。
“新小微”以新华社记者赵琬微为原型,采用人工智能技术还原真人发肤,在立体感、灵活度、可塑性、交互能力和应用空间等方面较前一代AI合成主播(2D形象)有了大幅跃升,并实现了从单一景深机位到多机位多景深、微笑播报到多样化精微表情播报等进步,播报形态可通过不同角度全方位呈现,立体感和层次感明显增强。
为研发“新小微”,团队采集了海量数据,使用几百个摄像头对角色原型进行360度全方位标记点扫描,并捕捉记录了多种形态的表情和动作;采集完成后,由原力科技公司通过算法实时驱动、渲染构建3D数字人物模型。
不同于目前大多数靠真人驱动的3D数字人物,“新小微”采用AI驱动,输入文本后,AI算法便可实时驱动数字人物,生成的语音、表情、唇动更接近于真人,并可实现功能持续自我更迭。
CinemaNext向影院发送放映设备DCP测试包
近日,法国电影技术公司CinemaNext制作了4个测试DCP(1个加密、3个未加密),并提供给全球范围内的影院客户,用以在影院复工前测试图像放映与声音播放设备。
在法国地区,CinemaNext与法国影像声音技术高等委员会(Superior Commission for Image and Sound, CST)以及法国影院联合会(Federation of French Cinemas, FNCF)达成合作,联合为各类影院发送DCP测试包,以便影院确认其放映设备的运行状态,制作并发送KDM超过7000个。
为了更便捷地发送DCP测试包,CinemaNext基于Éclair数字内容发行网络,利用ÉclairBoxes设备及ÉclairExpress SaaS服务为签约影院提供DCP。若未加入该公司发行网络,影院也可自行从ÉclairPlay平台免费下载该DCP。
为了适应当前最新技术标准,测试图像由CinemaNext工程师团队开发设计,覆盖遮幅(Flat)和宽银幕(Scope)、2K/4K、5.1声道和7.1声道格式。
LG注册LED电影屏商标LG LED Cinema
近日有韩媒报道称,韩国LG集团已于今年3月注册LED电影显示屏的品牌商标LG LED Cinema,原计划要在4月份的CinemaCon展会上首次亮相,但由于全球新冠疫情影响,展会被迫取消,因此LG LED Cinema至今仍未正式推出,但注册商标这一举动意味着LG将正式进入影院LED显示屏系统市场,与已经商用的三星Onyx形成正面竞争。
除三星、LG外,索尼也在开发应用于影院的LED显示屏,目前已完成原型机制造;国内厂商利亚德、洲明科技及奥拓电子也加快步伐布局拓展LED电影屏市场。
End
-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本文内容由数艺网收录采集自微信公众号电科动态 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。