3D重建瞳孔反射图像:美国科研团队成功实现-每日视讯

中关村在线   2023-06-30 07:04:36


(资料图片)

美国马里兰大学的科研团队近期借用了神经辐射场(NeRF)技术,实现了3D重建瞳孔反射图像的可能性,模拟出拍摄照片时,拍摄主体视角下的场景。 具体操作流程如下:首先需获得一张高分辨率的人脸照片,放大图像后,运用技术手段剖析瞳孔的反射画面,消除了由角膜引起的伪影以及眼睛形状引起的形变等因素,最后形成了一个3D模型。 神经辐射场(NeRF)是一项计算机视觉技术,其可以生成高质量的三维重建模型。具体来说,它利用深度学习技术从多个视角的图像中提取出对象的几何形状和纹理信息,并运用这些信息生成一个连续的三维辐射场,从而在任意角度和距离下都可以展示出高度逼真的三维模型。 据这个科研团队表示,这个模型生成的图像还没有达到完美的程度,但已经可以大致识别物体,目前,这个团队还研发了一个专门的算法来进一步强化这个3D模型。 为了展示这项技术的效果,这个团队还重建了Miley Cyrus和Lady Gaga音乐视频中的两张流泪照片。在其中一个重建照片中,从Lady Gaga的眼睛中看出了一个类似于上半身的物体的影子。虽然目前这种还原效果在质量上相对较差,但此项技术的潜力被业界广泛期待。