So verwandeln Sie ComfyUI mit der LTX 2.3 Pipeline in ein vollwertiges Schnittstudio

Jeder, der versucht hat, ein zusammenhängendes Video oder einen Musikclip in ComfyUI zusammenzustellen, kennt dieses Problem. Der Graph wird schnell zu einem endlosen „Spaghetti" aus Verbindungen. Man muss Fragmente einzeln generieren, in einen Video-Editor ziehen, sie zum Beat synchronisieren, und dann wieder zurückgehen, wenn man merkt, dass das Gesicht der Figur in der dritten Sekunde abgedriftet ist.

Ein Entwickler mit dem Username VRGameDevGirl hat ein Node-Paket comfyui-vrgamedevgirl veröffentlicht. Dies ist ein Versuch, die node-basierte Oberfläche von einem einfachen GIF-Generator in eine vollwertige Schnittsuite zu verwandeln.

Was das Paket enthält

Das Projekt kombiniert ein Video-Zusammenstellungstool, Audio-Verarbeitungsfunktionen, Frame-Restaurierungsmodule und LoRA-Training-Pipelines.

Das Hauptelement ist hier der VRGDG Music Video Builder UI Node. Wenn er zur Canvas hinzugefügt wird, öffnet er eine separate Arbeitsschnittstelle direkt über ComfyUI. Sie können eine Audiodatei oder fertige Untertitel im SRT-Format laden, Szenen-Marker setzen und die Generierung jedes Frames mit der Timeline verknüpfen.

Werkzeuge für die Arbeit mit Szenen und Video

Anstatt manuell Prompts für jedes Segment zu wechseln, können Sie mit dem Video Builder ein Projekt Szene für Szene verwalten.

• Interaktive Timeline. Sie können die Track-Struktur sehen und Verse, Refrains und Instrumentalabschnitte markieren.
• Frame-übergreifende Generierung. Das Tool kann den ersten und letzten Frame benachbarter Szenen verknüpfen. Dies erhält die visuelle Konsistenz, wenn eine Figur von einer Einstellung zur nächsten übergeht.
• Prompt-Automatisierung via LLM. Der Builder verbindet sich mit einem lokalen neuronalen Netzwerk über LM Studio oder eine Drittanbieter-API. Er liest die Songtexte und schlägt Szenenbeschreibungsoptionen vor.

Gesichtskorrektur und Qualitätsverbesserung

Videomodelle verlieren oft Details, wenn eine Figur weit von der Kamera entfernt ist. Das Set enthält fertige Lösungen für die Restaurierung.

Die Face Fix Nodes lokalisieren ein Gesicht im Footage, schneiden das relevante Fragment heraus, führen es durch ein Diffusionsmodell, um Details wiederherzustellen, und fügen das Ergebnis sorgfältig zurück in den ursprünglichen Clip ein.

Für finale Retuschen hat der Autor Fast Film Grain, Color Match und Schärfungsalgorithmen hinzugefügt. Sie bringen disparate generierte Segmente zu einer einheitlichen Farbpalette und fügen cinematisches Grain hinzu, ohne merklichen Render-Geschwindigkeitsverlust.

Audio, Stimmklonung und Datasets

Neben dem Videomaterial enthält das Repository auch Werkzeuge für die Audio-Aufbereitung und das Modell-Training.

Das Paket enthält das VoxCPM2-Modul, das eine Stimme aus einer kurzen Probe klonen und Sprache aus Text generieren kann. Das ist praktisch, wenn Sie eine Voiceover-Erzählung für einen Clip benötigen. Hilfsnodes können Audio in Segmente schneiden, Stille entfernen und Transkriptionen extrahieren.

Für diejenigen, die ihre eigenen Modelle trainieren, ist die VRGDG LoRA Dataset Creator UI Oberfläche praktisch. Sie vereinfacht das Labeln von Bildpaaren und die Vorbereitung von Textbeschreibungen. Das Repository enthält fertige Workflows für das Training von LoRA auf LTX 2.3 und Z-Image mit Musubi-Tuner.

Installation und Lizenzdetails

Sie können das Set auf die Standardweise über den ComfyUI Manager installieren, indem Sie nach vrgamedev suchen, oder indem Sie das Repository direkt klonen:

cd ComfyUI/custom_nodes
git clone https://github.com/vrgamegirl19/comfyui-vrgamedevgirl.git

Nach der Installation vergessen Sie nicht, die Abhängigkeiten aus requirements.txt in Ihre ComfyUI-Umgebung zu laden und die Seite in Ihrem Browser mit Strg+F5 zu aktualisieren.

Beachten Sie die Lizenz. Das Projekt wird unter AGPL-3.0 vertrieben. Das bedeutet, dass Sie, wenn Sie den Code in kommerziellen Diensten oder SaaS-Produkten verwenden, Ihre Anwendung unter derselben Lizenz als Open Source veröffentlichen müssen.

Für wen dieses Set gedacht ist

Das Paket wird definitiv jedem nützlich sein, der Clips, Kurzfilme oder animierte Geschichten erstellt und es leid ist, zwischen einem Dutzend verschiedener Programme zu wechseln.

Sie müssen nicht gleich in die gesamte Video Builder-Funktionalität eintauchen. Sie können einzelne Nodes auswählen: Color Match verwenden, um Farben anzupassen, das Gesicht einer Figur in einem fertigen Video zu korrigieren, oder Voiceover durch VoxCPM2 generieren.