¿Por qué las IAs hacen que el anime se vea raro?

Si alguna vez has procesado anime clásico usando herramientas de IA, probablemente hayas notado algo extraño. Los resultados suelen ser decepcionantes: la IA fuerza una interpolación continua donde la animación tradicional prefiere saltos y retenciones deliberadas. Este artículo explora por qué ocurre esto, cómo funcionan los estándares de fotogramas en el anime y por qué es tan difícil para las IAs modernas entender cuándo suavizar y cuándo respetar la intención artística.

Los estándares tradicionales de los fotogramas

Para entender el problema, primero hay que mirar cómo se ha hecho siempre. El anime para cine sigue un estándar claro: 24 fps. Aunque la señal de televisión analógica NTSC era de 59,94 campos por segundo, eso no significa que la animación fuera a 30 fps. Se utilizaba un proceso llamado 3:2 pulldown para distribuir esos 24 fotogramas en los 60 campos sin cambiar la velocidad real de la obra.

A día de hoy, con el Blu-ray y el streaming, se distribuye directamente a 23,976 fps. Si tu pregunta iba por la digitalización de anime clásico, ahí aparece un problema adicional muy interesante: distinguir si un archivo a 29,97 fps contiene 24 fps con pulldown o si realmente fue producido a esa frecuencia.

¿Por qué las IAs arruinan el movimiento del anime?

Aquí es donde la tecnología se encuentra con una limitación inesperada. Los modelos de vídeo modernos, como los basados en transformers espacio-temporales, no procesan cada frame de forma completamente aislada; analizan ventanas temporales para entender la coherencia entre fotogramas.

Sin embargo, hay una razón fundamental por la que fallan: el anime suele animarse en doses o en treses. Una escena puede tener simultáneamente varias velocidades temporales. Por ejemplo, un personaje podría estar animado en treses (8 dibujos/s), mientras que su boca lo hace en doses (12 dibujos/s) y la cámara recorre el paisaje a 24 fps.

La IA, al ver una secuencia de imágenes, tiende a asumir que si hay dos poses distintas, debe existir un movimiento continuo entre ellas. Esto es cierto para la imagen real, pero falso para el anime.

Si simplemente «suaviza» todo hasta 60 fps, comete errores graves: hace mover al personaje entre dibujos cuando el animador quería un movimiento escalonado, o elimina el efecto de impacto que produce la retención. Muchos aficionados detestan estas interpolaciones agresivas porque convierten una decisión artística en un movimiento continuo que nunca estuvo pensado así.

El reto del renderizado 3D y rotoscoping

Cuando hablamos de anime renderizado directamente en 3D, la situación se vuelve aún más compleja. Un motor 3D normalmente anima a 60 fps de forma continua, pero muchos estudios japoneses reducen deliberadamente la frecuencia visible para conservar la estética tradicional.

Los personajes pueden actualizarse a 12 o incluso 8 fps, mientras que la cámara sigue moviéndose a 24. Cuando una IA intenta «mejorar» ese material, puede interpretar que esos personajes «van a tirones» y crear interpolaciones donde el director quiso que hubiera un hold.

Con el rotoscoping ocurre algo similar. El material de origen suele ser acción real con movimiento continuo, y si el animador decide simplificarlo dejando ciertas poses durante varios fotogramas, una IA que vuelva a interpolar está intentando reconstruir un movimiento que se decidió eliminar deliberadamente.

En conclusión, la calidad de una IA en este contexto no debería medirse solo por cuánto suaviza el movimiento, sino por cándo decide no suavizarlo. La investigación actual apunta a modelos capaces de descomponer la escena para distinguir entre el movimiento de cámara y la intención artística detrás de cada capa. Esa capacidad será probablemente una de las diferencias más importantes entre las herramientas actuales y las que lleguen en los próximos años.