腾讯的研究人员团队最近推出了一种全自动系统

用自拍照创建逼真的3D数字人物 来自深夜小编 CG文章_CG资源

腾讯的研究人员团队最近推出了一种全自动系统

腾讯的研究人员团队最近推出了一种全自动系统,该系统可以使用消费者级别的RGB-D自拍相机生成逼真的3D数字人物。


免费重建系统与腾讯研发系统对比


系统使用简短的自拍RGB-D视频(录制视频时需要旋转头部),以在不到30秒的时间内完成高质量的重建。




“我们的主要贡献是一种新的面部几何建模和反射率合成程序,该程序大大改善了现有技术。具体地说,给定输入视频,首先采用两阶段帧选择算法来选择一些高质量帧进行重建。” 


“然后将一种新颖的,基于可微分渲染器的3D变形模型(3DMM)拟合方法应用于从多视图RGB-D数据中恢复面部几何形状,这利用了广泛的数据生成和摄动的优势。”


毛发效果


研究小组指出,与传统3DMM相比,他们的3DMM具有更大的表达能力,这意味着用户可以使用线性底座恢复更准确的面部几何形状。至于反射率合成,该团队使用了一种混合方法,将参数拟合和CNN混合在一起,以生成具有逼真的头发/毛孔/皱纹细节的高分辨率反照率/法线贴图。



论文原文:

https://arxiv.org/pdf/2010.05562.pdf




扫码关注深夜CG工作室微信公号,首次关注可领取50元优惠券

加载中