Como entusiasta de la animación 3D, me encontré en una situación complicada: entregar una animación al nivel de Hollywood para un parque temático en solo tres días. Con un proyecto completado al 75 %, necesitaba un milagro para perfeccionar la animación y la geometría. ¡Y llegó la IA!
Liberando el poder de la transferencia de estilo por IA
En mi búsqueda por salvar el día, me topé con la función de transferencia de video a video de la plataforma Runway . Así es como la IA se convirtió en el superhéroe de mi saga de flujo de trabajo en 3D.
El flujo de trabajo de la IA: una guía paso a paso
- Render inicial: comienza por diseñar la geometría y la animación de tus tomas. Busca una buena composición y sincronización en lugar de la perfección: la IA te respalda para darle un toque glamuroso.
- Magia de los marcos de estilo: crea imágenes A (inicio) y B (final). Con la composición adecuada, la IA puede hacer maravillas. Usa ControlNets en ComfyUI para transformar maquetas en marcos de estilo "finales", reemplazando a Photoshop para obtener resultados más variados y menos tediosos.
- Prueba de movimiento: cargue su prueba de movimiento sin procesar en Runway. Use los cuadros A y B de ComfyUI como brújula para mantener la geometría y el movimiento, y así evitar tiempos de renderizado prolongados.
- Asistente de sugerencias: deja que ChatGPT te ayude a crear sugerencias que Runway adora. Sube tus marcos de estilo y obtén descripciones precisas que se alineen con lo que percibe la IA.
- Experimente y ajuste: juegue con la configuración de cfg (creatividad) para lograr el equilibrio perfecto, ahorrando tiempo y manteniendo las riendas de su obra maestra.
La creatividad se encuentra con la automatización
La combinación de herramientas 3D e IA es una potencia creativa.
La IA te libera de la rutina de realizar ajustes finales en la animación 3D. En lugar de tener que realizar ajustes interminables, puedes completar el proceso con un clic en Runway.
La destreza de la IA para recrear imágenes a escala humana es impresionante, gracias a su amplio entrenamiento. Sin embargo, para productos de nicho, imágenes técnicas o diseños abstractos, el conjunto de referencias de la IA es limitado. Las indicaciones de texto no pueden capturar todos los matices artísticos que desea dirigir en un video. Las herramientas 3D le brindan el control para orquestar su contenido de video mientras la IA se encarga del estilo. Si bien lograr el fotorrealismo ahora es muy fácil, recuerde que, a medida que la automatización se convierte en la norma, destacarse requiere usar la IA de formas inteligentes y específicas para realmente captar la atención.