En diciembre pasado, Google Photos agregó una excelente característica nueva: Fotos cinematográficas. Se pueden generar automáticamente desde la aplicación, haciendo clic en la sección de destacados recientes.
¿Cómo funcionan las fotos cinematográficas en Google Photos?
Desde el blog de google han querido explicar cómo consiguen darle movimiento a las fotografías, logrando que tengan ese efecto 3D tan llamativo. Como siempre, utilizan sus redes neuronales y su experiencia computacional.
Según Google, las fotografías cinematográficas quieren intentar que el usuario reviva “la sensación de inmersión del momento en el que tomó la foto” simulando tanto el movimiento que hizo la cámara como el paralaje 3D. ¿Cómo convierten una imagen 2D en 3D?
Google utiliza sus redes neuronales entrenadas con fotografías tomadas con los Pixel 4 para estimar la profundidad de campo con una única imagen RGB
Google explica que, al igual que ocurre con el modo retrato o la realidad aumentada, las fotografías cinematográficas requieren de un mapa de profundidad para dar información sobre la estructura 3D. Para conseguir este efecto en cualquier móvil que no tenga doble cámara, han entrenado una red neuronal convolucional para predecir un mapa de profundidad a partir de una única imagen RGB.
Con un solo punto de vista (el plano de la fotografía), puede estimar la profundidad de la fotografía con señales monoculares como los tamaños relativos de los objetos, la perspectiva de la fotografía, el desenfoque, etc. Para que esta información sea más completa, utilizan datos recogidos con la cámara del Pixel 4, para combinarlos con otras fotografías tomadas con cámaras profesionales por el equipo de Google.
La técnica es similar a la del modo retrato de Pixel: la imagen se analiza, se segmenta y una vez que el fondo se ha aislado con éxito, se simula el movimiento desplazando el fondo. Esto es bastante más complejo, ya que requiere de varias correcciones y análisis sobre la fotografía ya que, unos pocos píxeles mal interpretados, podrían arruinar el resultado final.
