资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

NVIDIA:为什么说智能AI算法是数字人的未来?

2022-02-02

Esther|编辑

不管是在2D还是3D时代,大家对数字人技术应该已经不陌生。目前,这项技术已经广泛应用于媒体、娱乐等领域,比如电影中的CGI角色、游戏中的3D虚拟角色,或是电视节目、演唱会中的AR虚拟偶像等等。

实际上,创建高保真数字人需要大量时间和经历,甚至可能需要数百名艺术家、程序员和工程师参与。此外,尽管3D渲染技术在不断提升数字人的数字效果和细节,人们依然可以清晰分辨它和真人的不同。毕竟人们对于恐怖谷效应非常敏感。

为了简化并加速数字人开发过程,NVIDIA推出了AI虚拟形象工具Omniverse Avatar。NVIDIA表示:我们相信,实现这一目标的关键是人工智能和模拟工具。

此外,为了帮助你了解数字人的前景,NVIDIA图形和AI总监Simon Yuen介绍了数字人的定义、重要性基于和AI结合的潜在应用。据青亭我那个了解,Yuen在NVIDIA负责Digital Human相关工作,目标是开发新的角色技术和基于深度学习的解决方案,以便以新的和更有效的方式创建高质量的数字角色。在加入NVIDIA之前,Simon在视觉效果行业工作了超过21年,曾在Method Studios、数字王国、索尼图形图像动作公司、梦工厂、暴雪娱乐等公司负责逼真数字角色创作。

数字人定义

Yuen认为,数字人指的是我们在虚拟世界中的数字表现形式。在3D游戏初期,《VR战士》游戏就展示了玩家用3D角色进行战斗的玩法。如今,《战神》、《最后生还者》等热门游戏中,也能看到许多令人难忘的数字角色。

基于CGI打造的数字人也可以扮演电影中的角色,比如《复仇者联盟:终局之战》中的灭霸、《本杰明·巴顿》中主角的老年形象。

一些交互式媒体则将数字人与AI结合,利用智能的数字人来讲故事,比如Fable、Baobab等工作室创建的AI数字角色,他们还将这些角色应用于交互式VR内容中。

那么,数字人的定义具体是什么?应该用什么样的指标来分类数字人呢?

数字人通常分为三大标准:1)写实还是风格化;2)实时在线还是离线;3)由AI驱动还是由人驱动。

为数字人注入生命

前面提到,创造数字人需要大量时间和经历。整个过程通常包括三大步骤:生成、加动画和智能系统,而这三个步骤都需要融合不同的艺术和技术元素。

细节方面,开发者首先需要3D建模,然后渲染纹理、着色、绑定骨架、绑定皮肤变形。在加入动画和动作的时候,开发者需要考虑物理模拟,不管是数字人的四肢、躯干还是面部、头发和衣服,其运动和变化效果应该足够符合物理规律,模拟真实的动作。为了提升数字人运动的准确性,开发者通常采用两种方法:手动制作动画,或是通过动捕技术来获取运动数据。更常见的是两种方法结合。

在过去几年中,越来越多人开始用AI来生成、合成动画,控制数字人的动态行为。常见的AI主要控制数字人的特定行为,随着技术发展,AI数字人的应用场景也越来越广泛,分析环境、上下文的能力也越来越好,因此其移动方式和行为的可信度也更高。另一方面,AI数字人需要能同时识别虚拟环境和现实环境,包括环境中的人、物体等等,目的是更好的导航和交流。

尽管如此,模拟真人情感和行为细节对于数字人来讲仍然困难。如果希望数字人更加智能,将需要支持与真人的双向交互,这是将需要自然语言处理和自然语音技术(Riva、Ensemble AI、Replica等等),才能模拟和真人对话。

数字人的重要性

应用场景方面,数字人可以应用于媒体、娱乐领域,游戏、AR/VR等其他领域对这项技术的需求也在增长,各种案例也足够丰富。

比如:AI数字助理在医疗保健、零售等行业已经展现巨大潜力,AI数字助理可以帮助医疗人员改善培训和工作流程。此外,医生可以在保真的虚拟环境中模拟培训,不受时间和地理位置限制,可重复数百次,锻炼肌肉记忆。而在零售业,AI数字人可以为客户带来个性化体验,提升客户服务。

为了更好的服务医疗人员、消费者,AI数字助理需要对语言交流有深刻的理解,才能与人类自然交流,并完成各种任务。

在去年11月的Project Tokkio数字人演示中,NVIDIA CEO黄仁勋展示了AI版的自己(Toy Jensen Omniverse Avatar),这个AI数字人拥有黄仁勋的声音、动态和形象,可以跟专家讨论生物学、气候科学等话题。除此之外,Project Tokkio技术还可以为零售店提供自助服务,为客户提供支持。

而在应用于视频会议的Project Maxine演示中,则展示了一个智能降噪、实时转录、翻译的AI数字形象,其特点是可以模拟说话人的口型和语调。

在建筑和制造等领域,数字孪生技术正在帮助工厂、企业模拟大规模环境(工厂、城市、建筑物等),以及环境中的工作人员。与此同时,在数字人帮助下,企业可以通过准确的模拟来评估风险和预测环境变化,以此来优化建筑的设计。

与语音助手等AI数字助理相比,AI数字人需要达到的标准更高,当置于工厂、摩天大楼虚拟环境中,AI数字人需要模拟工人、游客等人类的行为,在虚拟世界中移动和表现。

此外,数字人将有助于生成合成的数据,以训练AI模型,比如模拟工厂中工人的行为等等。未来,合成数据将有望成为人工智能发展的关键,因此数字人类在合成模拟领域也足够关键。

随着技术发展,未来数字人将应用在多样化的创意场景,比如AR/VR、线上虚拟模拟、虚拟社交等等。NVIDIA预计,未来每个人都会拥有数字虚拟形象,来代表自己。此外,NVIDIA Omniverse将成为兼容3D行业标准USD格式的虚拟平台,允许各种类型的数字人共存,人们可以通过数字人的形式在Omniverse上交换数据与交流。

参考:

https://medium.com/@nvidiaomniverse/an-era-of-digital-humans-bfa10d41e289

( END)


 
   推荐阅读    




 
每天五分钟,轻松了解前沿科技。    
         —— 青亭网  
阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号青亭网 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

数字媒体艺术 新媒体艺术 科技艺术

9634 举报
  0
登录| 注册 后参与评论