¿Es el generador de vídeos con IA el futuro del anime? En absoluto

Hasta ahora, Japón ha estado relativamente tranquilo durante el auge de la IA, pero ahora, siguiendo la tendencia ChatGPTxGhibli, la compañía japonesa Animon ha lanzado un generador de videos de IA específicamente para anime.

Esta herramienta gratuita toma imágenes fijas de anime, dibujos animados o arte CG y crea una animación de 5 segundos basada en la indicación que ingresas. La empresa afirma que ayudará tanto a los animadores profesionales como a los aficionados a acelerar el proceso creativo, requiriendo básicamente solo un fotograma dibujado a mano por cada 5 segundos de vídeo en lugar de cientos de fotogramas.

 

¿Hay lugar para las herramientas de IA en la industria del anime?

Una confesión rápida: soy un gran fanático del anime. He visto cientos de espectáculos, visito Japón casi todos los años, he trabajado allí y hablo japonés. No soy un experto en el proceso de animación, pero sé cómo se ve una buena animación y cómo se ve una mala animación.

Incluso sin la intervención de la IA, ya existen muchas formas de reducir los costos de animación en la industria del anime. Gran parte del trabajo ahora se subcontrata a estudios de animación coreanos, y el tiempo y el dinero asignados a ellos disminuyen constantemente.

Cuando un estudio no invierte lo suficiente en su animación, esto afecta a los programas de dos maneras principales: hay mucho menos movimiento y hay una caída notable en la calidad del dibujo. Los diseños de personajes pueden verse hermosos en los carteles promocionales, pero las versiones cuadro por cuadro no tienen el mismo nivel de detalle o proporciones correctas y, en algunos casos, incluso se ven inconsistentes.

Tengo un ejemplo desafortunado de esto en una serie que me encanta (un popular anime de voleibol llamado Haikyuu ). Los primeros episodios estaban muy bien animados, pero por alguna razón, la calidad bajó durante una de las últimas temporadas. Aquí hay una imagen que compara una captura del protagonista de un episodio de la primera temporada con otra de un episodio de la cuarta temporada.

Para ser claros, algunos programas aún se ven geniales, pero la animación de baja calidad puede aparecer prácticamente en cualquier lugar y puede ser lo suficientemente mala como para desanimar a espectadores como yo.

Con un nivel tan bajo, cabría pensar que las herramientas de creación de vídeo basadas en IA ya tienen posibilidades en este sector. Sin embargo, a juzgar por el contenido que he visto de Animon.ai, me temo que no es así.

 

¿Cómo se ve la animación generada?

La herramienta funciona tomando la imagen que le proporcionas y animándola durante cinco segundos, pero eso es prácticamente todo lo que puedes garantizar que sucederá. En mi primera prueba, le proporcioné una imagen fija de Jet Black de Cowboy Bebop a punto de beber de un vaso de whisky.

Mi petición fue simple: “El personaje está bebiendo de la copa que estás sosteniendo”. El vídeo que recibí a cambio tenía algunos errores.

Primero, Jett Black no está bebiendo. Parece estar hablando, acercando el vaso a su cara, pero no veo que esté bebiendo realmente. Sin embargo, la bebida dentro del vaso parece moverse mucho: el vaso se llena y se vacía aunque no parezca que esté bebiendo. Si quieres ver a Jett beber, puedes encontrarlo aquí mismo en YouTube.

El modelo de IA también sufre el problema de la cicatriz que tiene Jet. El extremo inferior ha desaparecido un poco y cuando abre los ojos, la cicatriz está justo encima de su globo ocular. Como obtuve la imagen fija de un video en el canal de YouTube de Crunchyroll, tiene el logotipo de CR en la parte superior derecha. Sin embargo, en el video de IA, el texto parece haber sido transformado en "Crunchyolo".

A continuación, intenté introducirle una imagen fija de la escena del baile "Mow Maow" de The Apothecary Diaries , y obtuve un resultado realmente extraño . A diferencia de los movimientos tridimensionales, borrosos y cambiantes del vídeo en 2D de Jet, la IA me dio lo que parecía un modelo 3D.

Animon.ai también se dedica al arte digital, así que pensé que era lógico que pudieran crear modelos 3D, pero me sorprendió bastante. Si bien The Apothecary Diaries utiliza muchos modelos 3D de edificios y fondos, el personaje en la imagen que usé estaba claramente dibujado.

En ambos casos, los vídeos generados se ven significativamente más estables cuando se incluyen modelos 3D. El movimiento parece menos brusco y el modelo mantiene el tamaño y la forma del personaje de forma más consistente. Aún así no me gustaría verlo en un programa tal como está, pero definitivamente es un paso adelante del contenido de estilo 2D que me dio.

Sin embargo, el argumento de venta de Animon.ai trata de ayudar a los animadores a ahorrar tiempo dibujando menos cuadros, lo cual es irrelevante cuando se trata de animación 3D. En realidad, es rápido y económico en comparación con la animación 2D, y no tiene sentido crear un modelo 3D y luego usar un generador de video impulsado por IA para animarlo aleatoriamente en lugar de usar un software de animación.

 

¿Deberías utilizar Animon.ai?

Si no sabes nada sobre animación y quieres crear un GIF o un vídeo rápido para uso personal, esta herramienta probablemente funcionará bien (o te hará reír si no es así). Sin embargo, es difícil imaginar que algún animador aficionado o profesional vea algún valor real en esto.

Si quieres ver de lo que es capaz esta herramienta, el canal de YouTube de Animon ha publicado un vídeo musical que parece haber sido creado casi en su totalidad por inteligencia artificial; al menos, eso es lo que parece.

En general, creo que hay dos razones principales por las que los generadores de vídeo con IA no están preparados para ningún negocio real. Lo primero es que el movimiento se ve muy mal, y lo otro es la falta de control que tienes sobre el resultado. En realidad, es lo mismo que cualquier otra herramienta de IA generativa: simplemente no es lo suficientemente consistente ni receptiva como para ser confiable. Probablemente llegaremos allí algún día, y todavía es divertido experimentar con las primeras versiones de la tecnología, pero no dejes que los vendedores te engañen: ninguna de estas herramientas está lista aún para uso comercial. Los expertos de la industria de la animación enfatizan que las herramientas de IA actuales aún están evolucionando y necesitan más mejoras.