资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

一键生成?从照片生成人脸 3D 模型 #AvatarMe

原创 2022-05-25

Mixlab

制作数字人的工具非常多,2D 类制作工具包括 Live2D、Vroid Studio;超写实类制作工具包括 Avatary、MetaHuman Creator 等。

知识库

除了使用设计工具进行数字人制作,也可以使用算法直接生成数字人模型。AvatarCLIP 就是通过输入文本来输出动态数字人模型。

小杜

AvatarMe 也是可自动生成数字人模型的算法,输入信息可以是任何人脸图片类信息,包括相机拍摄的图片、绘画人像等。



AvatarMe



AvatarMe 是一种数字人脸模型重建方法,输入一张包含人脸图像的信息即可生成可实时渲染的逼真写实的 3D 面部

小杜

使用该模型用输入图片生成重建数字人脸有三个准备步骤

# 01
人脸输入图像基础信息重建

重建输入图片信息得到可渲染用纹理模型

# 02
提高纹理模型分辨率

纹理被采样8次后使用8倍分辨率增强纹理模型,提高输出模拟的精度

#03
图像转换网络对纹理进行去光处理

最后一步使模型获得具有高频细节的漫反射反照率,使面部和头部模型可以在任何环境中逼真地渲染

小杜

完成模型的输出生成后即可开始模型应用

较高精度模型展览


不同种类输入图像的3D数字模型重建

黑白照片、名人名画、不同背景中的人像都可重建生成。

# 不同光源、场景中的重建头像实时渲染

小杜

该模型使用了高分辨率网格和反射纹理,包括漫反射反照率、镜面反射率、漫反射法线、镜面法线等,可与大多数开源或商业渲染器一起使用,能够实现在各种照明环境中渲染重建的数字头像模型。


图片-数字重建模型-实时场景渲染技术应用面十分广。文物头像&名人画像动态创意元宇宙身份系统技术基础设施等等应用领域都有用武之地。

项目地址:
github.com/lattas/avatarme
论文地址:
arxiv.org/abs/2112.05957
视频地址:
youtube.com/watch?v=fEsgeZPN8Uw
技术解读扩展阅读推荐:
zhangtemplar.github.io/avatarme

小杜

关于输入图片类数字人生成还有类似的算法

DECA: 基于单张图片进行三维人脸建模


可参考项目资源:
openbayes.com/console/open-tutorials/containers/3vGLMGSXAcY


opus

欢迎加入社群,探索 数字人 的多样玩法~


备注:数字人

[ 元宇宙创作者指南 ] 
[ 元宇宙资源清单 ]
github.com/shadowcz007/awesome-metaverse


阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号无界社区mixlab ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

数字媒体艺术 3D 数字人 科技艺术 科技前沿

56010 举报
  0
登录| 注册 后参与评论