La nueva cámara virtual de Stability AI convierte cualquier foto en un impresionante video 3D y estoy impresionado con la calidad.

Los videos de inteligencia artificial de estabilidad han estado agregando movimiento y vida al texto y las imágenes durante años, pero ahora literalmente están agregando una nueva dimensión al convertir imágenes 2D en videos 3D. Esta tecnología es una adición cualitativa al campo de la inteligencia artificial generativa para vídeo.

La nueva herramienta Stable Virtual Camera de la compañía está diseñada para procesar incluso una sola imagen y convertirla en un video animado de múltiples perspectivas, lo que significa que puede rotar el video y verlo desde cualquier ángulo. Esta herramienta facilita la creación de contenido de vídeo 3D innovador.

Este concepto no es del todo nuevo, ya que las cámaras virtuales han sido durante mucho tiempo un elemento básico en la producción cinematográfica y la animación, permitiendo a los creadores navegar y manipular escenas digitales. Pero Stability AI toma este concepto y le agrega una gran dosis de IA generativa. El resultado es que en lugar de requerir una reconstrucción detallada de la escena 3D o configuraciones de cámara finamente calibradas, Stable Virtual Camera permite a los usuarios crear un movimiento 3D suave y con precisión de profundidad incluso a partir de una sola imagen, todo con un mínimo esfuerzo.

Lo que distingue a esta herramienta de otras herramientas de generación de videos con IA es que no adivina el camino a través de las animaciones y no depende de conjuntos de datos masivos ni de reconstrucciones cuadro por cuadro. Stable Virtual Camera utiliza un proceso de propagación de múltiples vistas para generar nuevos ángulos basados ​​en la imagen proporcionada, de modo que el resultado parezca un modelo que realmente podría existir en el mundo real. Este enfoque mejora el realismo de los vídeos resultantes.

La herramienta permite a los usuarios controlar las trayectorias de la cámara con precisión cinematográfica, eligiendo entre acciones como zoom, órbita o incluso una trayectoria en espiral. El vídeo resultante puede estar en formato vertical para dispositivos móviles o en pantalla ancha. La cámara predeterminada solo puede funcionar con una imagen, pero manejará hasta 32 imágenes.

Stability AI ha puesto el modelo a disposición bajo una licencia no comercial para fines de investigación. Esto significa que puedes probarlo si tienes alguna habilidad técnica obteniendo el código de GitHub. Ser de código abierto, como suele ser Stability AI, también significa que la comunidad de desarrolladores de IA puede mejorar y ampliar las capacidades de la cámara virtual sin tener que pagar ningún coste a la empresa.

IA 3D

Por supuesto, ningún modelo de IA es perfecto, y Stability AI es sincero sobre las fallas en las que aún se está trabajando. Si esperas crear personas y animales realistas, o materiales con texturas particularmente desordenadas (como el agua), es posible que termines con algo digno de una película de terror de bajo presupuesto.

No te sorprendas si ves vídeos realizados con él que muestran perspectivas que se mueven de forma extraña a través de los objetos o que tienen cambios de perspectiva que resultan en efectos parpadeantes y fantasmales. Queda por ver si esta herramienta será adoptada ampliamente o simplemente será otra herramienta de IA pasada por alto por los cineastas de nicho.

Sin mencionar la cantidad de competencia que enfrenta por parte de herramientas de video con inteligencia artificial como Sora, Pika, Runway, Pollo de OpenAI y Dream Machine de Luma Labs. Stable Virtual Camera tendrá que demostrar su valía en el mundo real del cine para ir más allá de simplemente otro divertido vídeo de demostración.