Google presenta Auto Frame: la red neuronal cambia la perspectiva de las fotos de forma retroactiva

Google Research, en colaboración con Google DeepMind, ha anunciado un nuevo método de edición de imágenes que ya está disponible en la función Auto frame de Google Photos. Los usuarios pueden cambiar el ángulo de una foto después de tomarla: por ejemplo, girar la cámara para revelar otra parte del rostro o corregir la distorsión del objetivo gran angular. A diferencia del recorte o el zoom tradicionales, que no alteran la perspectiva, este nuevo enfoque interpreta la foto como una escena tridimensional y cambia automáticamente la posición de la cámara virtual dentro de ella. El método consta de dos etapas: primero, una red neuronal estima un mapa de puntos 3D y los parámetros de la cámara original (incluida la distancia focal); luego, mediante renderización 3D clásica, se crea una imagen con los nuevos parámetros, y un modelo generativo de difusión completa las áreas que no eran visibles en el original. Para la automatización completa, se emplean modelos de aprendizaje automático (ML) que determinan la posición y orientación de los rostros, lo cual es especialmente útil para retratos. La función está disponible en Google Photos dentro de Auto frame para fotos con personas: el usuario recibe una segunda versión del encuadre con el ángulo corregido automáticamente.