Cómo Convertir ComfyUI en un Editor de Video Completo para LTX Video

La generación de video a través de modelos de difusión en ComfyUI generalmente se siente como ensamblar un complejo set de Lego con cientos de cables. Si necesitas unir varios cuadros, agregar audio, sincronizar el diálogo de un personaje, o simplemente recortar una toma mala, el gráfico se infla instantáneamente hasta volverse ilegible. Terminas saltando constantemente entre Premiere Pro y el navegador, exportando resultados intermedios de un lado a otro.

Hace poco descubrí el repositorio WhatDreamsCost-ComfyUI. El autor se cansó de estar constantemente alternando entre docenas de nodos desconectados y construyó un panel de edición completo dentro de un solo nodo para el generador de video LTX. El proyecto ya ha acumulado casi 20,000 estrellas, e incluye varias soluciones de interfaz genuinamente inteligentes que ahorran mucho tiempo.

Por Qué Traer la Línea de Tiempo Dentro de los Nodos

El elemento central de la suite es el nodo LTX Director. En lugar de ajustar tiempos en campos de texto o calcular cuadros en una calculadora, obtienes una línea de tiempo familiar con pistas.

Puedes arrastrar y soltar archivos de video aquí, establecer fotogramas clave (primero, intermedio, final), cortar pistas y combinar indicaciones de texto. Tiene un mecanismo integrado de Retransmisión de Prompts que hace transiciones suaves del control de una descripción de texto a otra a medida que la línea de tiempo avanza.

Otro punto de dolor común al generar cabezas parlantes es calcular la duración de la escena para que coincida con la voz en off. El autor creó un nodo separado de Calculadora de Duración de Voz. Este analiza el diálogo entre comillas en tiempo real y genera la duración recomendada del clip en segundos basada en el ritmo del habla. Esto previene situaciones donde la generación se corta a mitad de palabra o el video se queda en silencio por unos segundos extra.

Lo Que Puede Hacer la Suite de Nodos

Más allá de la edición básica, la versión dos introduce varias adiciones prácticas al flujo de trabajo:

• Soporte para IC-LoRA. Puedes soltar un video o imagen de referencia en una pista separada (LTX Ingredients es compatible) para transferir movimiento o estilo sin trabajo manual de cadena de preprocesamiento.
• Manejo de audio integrado. Puedes importar tu propio archivo de audio, recortarlo directamente en la interfaz, y aplicar inpaiting de audio, mezclando la pista original con sonidos generados.
• Modo Retake (todavía en beta). Seleccionas un segmento en la línea de tiempo y regeneras solo la porción fallida directamente dentro del proyecto.
• Optimización de memoria y caché. Los modelos parcheados se almacenan en caché entre ejecuciones, así que ComfyUI no vuelve a cargar los pesos en la VRAM cada vez que haces pequeños ajustes al prompt. Además, el autor agregó soporte adecuado para SageAttention y Triton.
• Persistencia de estado. La línea de tiempo junto con todos los ajustes, archivos de medios importados y puntos de corte se pueden exportar a un archivo JSON estándar.

Controles Simples

¡Nuevo Modo de Recorte!

El paquete incluye nodos mejorados de carga de video y audio (Load Video UI / Load Audio UI). A diferencia de los componentes estándar de ComfyUI, estos soportan correctamente arrastrar y soltar, pueden recortarse a diferentes relaciones de aspecto, y no fallan en archivos mayores a 100 MB.

Para trabajo de cuadros por lotes, está el nodo Multi Image Loader. Combina preprocesamiento, ajuste de resolución y una galería mini integrada.

Instalación y Notas

Puedes instalar el paquete a través del ComfyUI Manager estándar (busca WhatDreamsCost-ComfyUI) o manualmente a través de la terminal:

cd ComfyUI/custom_nodes/
git clone https://github.com/WhatDreamsCost/WhatDreamsCost-ComfyUI.git

Antes de iniciar, asegúrate de actualizar las dependencias ComfyUI-LTXVideo y ComfyUI-KJNodes a sus últimas versiones, de lo contrario los nodos de línea de tiempo lanzarán un error durante la inicialización del gráfico. El autor ha publicado ejemplos de flujos de trabajo listos para usar directamente en la carpeta example_workflows dentro del repositorio.

En el lado negativo: el autor advierte honestamente en el README que el modo Retake todavía es tosco e inestable. Adicionalmente, procesar videos muy largos todavía choca con un muro con la RAM del sistema debido a las limitaciones del motor de ComfyUI, así que no podrás ensamblar películas de una hora dentro de un solo nodo.

Para Quién Es

Si estás experimentando con el modelo LTX Video 2.3 y estás cansado del caos de conexiones entre docenas de pequeños nodos, este proyecto definitivamente vale la pena agregar a tu colección. Reemplaza cadenas engorrosas de utilidades auxiliares con una línea de tiempo visual limpia y acelera notablemente las iteraciones al generar escenas complejas.