1. 视频
  2. 图片
微软发布一款头显,可以全身3D虚拟化

分享 长期 2022-03-14

案例介绍

为了在MR应用中表现人体动作的协调, 一般需要生成逼真的人像以及忠实于人类动作姿势。

来自微软旗下的Mixed Reality & AI Lab研究团队,开发了“FLAG:Flow-based Avatar Generation from Sparse Observations”解决方案,运用 HMD(头戴式显示器)可以完成从头部到手部的三维数据跟踪,以生成佩戴者全身的3D运动。

微软的HoloLens和Meta Quest等头戴式显示器仅限于头部及手部的数据追踪,对其方位的预测,并不能体现人体全身运动,很难生成逼真的3D虚拟形象。

“FLAG:Flow-based Avatar Generation from Sparse Observations”解决方案,从HMD信号中生成人体全身,完美地解决了这一问题。该解决方案是基于流模型学习给定的人体头部和手部数据,实现3D人体姿势的分布和基础分布之间的可逆映射。并从观测数据中学习潜在空间的概率映射,对人体关节的不确定性进行预测,生成合理的姿势

据了解,通过实验评估和消融研究,该方法优于大型运动捕捉数据集AMASS的最新方案,该数据集以SMPL人体模型模拟多种全身姿势,以误差极低、优化较少著称。

项目主页:https://microsoft.github.io/flag/files/paper.pdf

案例参与

* 文章为作者独立观点,不代表数艺网立场转载须知

本文由 数艺网 授权 数艺网 发表,并经数艺网编辑。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 本站部分文字及图片来源于网络,如侵犯到您的权益,请及时告知,我们将及时处理或删除。

HoloLens

21223 举报
登录| 注册 后参与评论