谷歌推出 Auto Frame:神经网络可后期改变照片视角
Google/DeepMind
Google DeepMind
Google Research
谷歌研究院和谷歌 DeepMind 在 Google Photos 中推出了 Auto Frame 功能,利用 AI 改变已拍摄照片的视角和角度。该技术将图像转化为 3D 场景,调整相机位置,并在保持真实性的同时填充隐藏区域。
谷歌研究院与谷歌DeepMind联合宣布了一种新的图像编辑方法,该方法已在谷歌相册的Auto frame功能中上线。用户可在拍摄后更改照片的视角:例如旋转相机以展现脸部的另一侧,或修正广角镜头的畸变。与传统裁剪或缩放不同,后者不会改变透视效果,而新方法将照片解读为三维场景,并自动调整其中虚拟相机的位置。该方法分为两个步骤:首先,神经网络估算3D点云图与原始相机参数(包括焦距);随后,通过经典3D渲染技术生成具有新参数的图像,再由生成式扩散模型补全原始画面中未显示的区域。为实现全自动化,系统采用机器学习模型检测人脸的位置与朝向,这对人像照片尤为实用。该功能已在谷歌相册的Auto frame中面向包含人物的照片推出——用户将获得第二个自动调整视角的画面版本。
来源: Google Research —
原文
