¿Es este generador de vídeos con IA el futuro del anime? Definitivamente no

Japón ha estado bastante tranquilo durante el auge de la IA hasta ahora, pero ahora, justo después de toda la tendencia ChatGPTxGhibli , la empresa japonesa Animon ha lanzado un generador de vídeo de IA específicamente para anime.

La herramienta de uso gratuito toma imágenes fijas de anime, dibujos animados o arte generado por computadora y crea animaciones de cinco segundos de duración según el mensaje que ingresa. La compañía afirma que ayudará a los animadores profesionales y aficionados a acelerar el proceso creativo, requiriendo esencialmente sólo un fotograma dibujado a mano por cada cinco segundos de vídeo en lugar de cientos.

¿Hay lugar para las herramientas de inteligencia artificial en la industria del anime?

Confesión rápida: resulta que soy un completo nerd del anime . He visto cientos de programas, visito Japón casi todos los años, he trabajado allí y hablo japonés. No soy un experto en el proceso de animación, pero sé cómo es una buena animación y cómo es una mala animación.

Incluso sin que la IA intervenga, ya existen muchas formas de tomar atajos en la animación en la industria del anime. Gran parte del trabajo ahora se subcontrata a estudios de animación coreanos, y el tiempo y el dinero que se dedican a ello siguen disminuyendo.

Cuando un estudio no invierte lo suficiente en su animación, afecta los programas de dos maneras principales: hay mucho menos movimiento y hay una caída notable en la calidad del arte. Los diseños de los personajes pueden verse hermosos en los carteles promocionales, pero las versiones dibujadas de cuadro a cuadro no tienen el mismo nivel de detalle ni las proporciones adecuadas y, en algunos casos, incluso parecen completamente descaradas.

Tengo un ejemplo desafortunado de esto en un programa que me gusta (un popular anime de voleibol llamado Haikyuu ). Los episodios anteriores estaban muy bien animados, pero por alguna razón, la calidad se desplomó durante una de las últimas temporadas. Aquí hay una imagen que compara una toma del protagonista de un episodio de la primera temporada con un episodio de la cuarta temporada.

Para ser claros, algunos programas todavía se ven geniales, pero la animación de baja calidad puede aparecer en casi cualquier lugar y definitivamente puede ser lo suficientemente mala como para ahuyentar a los espectadores como yo.

Con el listón tan bajo, se podría pensar que las herramientas de generación de vídeo con IA realmente tienen una oportunidad en esta industria. Sin embargo, a juzgar por el contenido que obtuve de Animon.ai, me temo que ese no parece ser el caso.

¿Cómo se ven las animaciones generadas?

La herramienta funciona porque toma la imagen que le das y la hace moverse durante cinco segundos, pero eso es todo lo que puedes garantizar que sucederá. Para mi primer experimento, le di un destilado de Jet Black de Cowboy Bebop a punto de beber de un vaso de whisky.

Mi mensaje fue simplemente: "El personaje de la foto toma un trago del vaso de whisky que sostiene". El vídeo que recibí a cambio tiene algunos errores.

En primer lugar, Jet Black no bebe whisky. Parece estar hablando y acerca el vaso a su cara, pero no veo nada que parezca estar bebiendo de verdad. Sin embargo, el whisky dentro del vaso parece estar muy ocupado: el vaso se llena y se drena a pesar de la falta de bebida que parece estar sucediendo. Si quieres ver la bebida Jet de verdad, está aquí en YouTube .

El modelo de IA también tiene problemas con la cicatriz de Jet. El extremo inferior casi desaparece, y cuando abre los ojos, la cicatriz pasa directamente sobre su globo ocular. Debido a que tomé la imagen fija de un video en el canal de YouTube de Crunchyroll, tiene el logotipo de CR en la parte superior derecha. Sin embargo, en el vídeo de IA, el texto parece haberse transformado en "Crunchyolo".

Luego, intenté alimentarlo con una imagen fija de la escena de baile de Maomao de The Apothecary Diaries , y obtuve un resultado realmente extraño . A diferencia de los movimientos alucinantes, blandos y cambiantes del vídeo 2D Jet, la IA me dio lo que parecía un modelo 3D.

Animon.ai también está diseñado para funcionar con arte generado por computadora, así que supongo que tiene sentido que pueda generar modelos 3D , pero me sorprendió bastante. Si bien The Apothecary Diaries utiliza mucho modelos 3D para edificios y fondos, el personaje definitivamente fue dibujado en la toma que usé.

De cualquier manera, los vídeos generados parecen significativamente más estables cuando se trata de modelos 3D. El movimiento parece menos chapoteante y el modelo mantiene el tamaño y la forma del personaje más consistentes. Todavía no me gustaría verlo en un programa tal como está, pero sin duda es un paso adelante con respecto al contenido de estilo 2D que me brindó.

Sin embargo, el argumento de venta de Animon.ai consiste en ayudar a los animadores a ahorrar tiempo dibujando menos fotogramas, y esto es irrelevante cuando se trata de animación 3D. Ya es rápido y económico en comparación con el 2D, y no tiene mucho sentido crear un modelo 3D y luego usar un generador de video de IA para animarlo al azar en lugar de usar software de animación.

¿Deberías utilizar Animon.ai?

Si no sabes nada sobre animación y quieres un GIF rápido o un vídeo para fines personales, esta herramienta probablemente funcionará bien (o te hará reír si no). Sin embargo, es difícil imaginar que algún animador aficionado o profesional vea un valor real en esto.

Si desea ver de qué es capaz la herramienta, el canal Animon de YouTube publicó un video musical que parece estar casi 100% generado por IA; al menos definitivamente lo parece.

En general, creo que hay dos razones principales por las que los generadores de vídeo con IA no están preparados para ningún trabajo real. Una es que el movimiento se ve muy mal y la otra es la falta de control que tienes sobre el resultado. En realidad, es lo mismo que cualquier otra herramienta de inteligencia artificial generativa: simplemente no son lo suficientemente consistentes y receptivos para ser confiables. Probablemente lleguemos allí algún día, y todavía es divertido jugar con las primeras versiones de la tecnología, pero no dejes que los vendedores te engañen: ninguna de estas herramientas está lista para uso comercial todavía.