为特定物体创建3D模型通常需要从多个角度拍摄对象照片,但现在Facebook和华盛顿大学的研究人员已经开发出可以绕过这种限制的AI算法,即使对于卡通人物,只有一个清晰,正面的全身拍摄产生一个公平的精确的3D模型。
识别出图像中的人物或卡通人物后,“照片唤醒”算法将背景与目标角色分开,创建符合人体轮廓的3D模型,然后将模型投射回2D平面以使其与人物。位置匹配,最后原始图像数据用于生成模型的背面,并且拼接使主题看起来像完整的3D角色。
就像过去各种3D幻觉图像的演变一样,Wake-Up算法的编辑照片中的目标角色将从背景“浮动”并从原始背景中以3D形式行走,跑步,坐下或跳跃。角色原本存在的地方不会是镂空的轮廓,系统会自动用图片元素填充空白区域。
唤醒的应用不仅仅是这个,因为算法自动识别角色的身体范围并构建3D模型,用户还可以改变3D模型的关节姿势来改变角色的动作姿势,以及然后得到一张照片,好像它在同一个场景中新照片。
当然,在这个仲博收容所应用程序中仍然存在一些限制,包括唤醒的对象最好在前面的图像中显示,并且系统无法处理交叉的腿或大部分身体被阻挡,但你可以容易想象这个。该技术应用于博物馆,美术馆和其他环境,AR技术的结合使得参观者和展品的交流更加生动。
尽管这个模型看起来并不完全逼真,但有些甚至像Nintendo 64游戏中出现的角色一样,但正是这种半现实主义风格更加令人愉悦,可以想象成模仿人类。 Deepfake应用程序,这项技术在前端应用程序中得到了更广泛的应用。