Bisher war die Erstellung von Videos mithilfe neuronaler Netze das Vorrecht von Cloud-Diensten wie Runway oder Luma. Wenn Sie heute über eine moderne Nvidia-Grafikkarte verfügen, können Sie hochwertige Videos direkt auf Ihrem Computer erstellen. In diesem Beitrag erkläre ich Ihnen, wie Sie die lokale Videogenerierung mit ComfyUI und dem effektiven LTX-2.3-Modell einrichten.
Tools zur Videogenerierung
Für die Arbeit benötigen wir:
– ComfyUI: eine leistungsstarke Schnittstelle mit einer knotenbasierten Architektur, die es Ihnen ermöglicht, den Generierungsprozess flexibel anzupassen.
– LTX-2.3: Ein modernes Modell von Lightricks, optimiert für die Erstellung flüssiger und detaillierter Videos mit relativ moderatem Videospeicherbedarf.
Hardwareanforderungen
Das Generieren von Videos ist ein viel ressourcenintensiverer Prozess als das Arbeiten mit Bildern:
– Grafikkarte (GPU): Nvidia RTX mit 8 GB VRAM ist das Minimum, das für eine Auflösung von 768 x 512 erforderlich ist. Für eine komfortable Bedienung und höhere Auflösungen sind 16–24 GB VRAM äußerst wünschenswert.
– Arbeitsspeicher (RAM): mindestens 32 GB. Videomodelle und VAEs beanspruchen beim Herunterladen viel Platz.
– Speicherplatz: ca. 500 GB für das Modell selbst und zugehörige Komponenten.
Einrichten und starten
Der Prozess zum Starten von LTX-2.3 in ComfyUI ist wie folgt:
1. ComfyUI aktualisieren: Das Modell ist relativ neu. Stellen Sie daher sicher, dass Sie die neueste Version der Schnittstelle installiert haben.
2. Workflow installieren: Der einfachste Weg ist, eine vorgefertigte JSON-Vorlage für LTX Video zu finden. Das Modell erfordert bestimmte Knoten, um mit dem latenten Videoraum zu arbeiten.
3. Eingabeaufforderung und Parameter: Geben Sie eine Beschreibung der Szene auf Englisch ein. Beachten Sie, dass der LTX-2.3 Bewegungen gut versteht (z. B. „Kamera umkreist“, „schnelle Bewegung“).
Warum LTX-2.3 wählen?
LTX-2.3 zeichnet sich dadurch aus, dass es Ergebnisse liefert, die mit proprietären Cloud-Diensten vergleichbar sind, aber lokal ausgeführt wird. Das gibt Ihnen:
– Vollständiger Datenschutz: Ihre Eingabeaufforderungen und generierten Videos werden nicht auf die Server anderer Personen übertragen.
– Kontrolle: Sie können mit der Bildrate (FPS), der Auflösung und der Eingabeaufforderungsstärke experimentieren, ohne für jeden Versuch bezahlen zu müssen.
Die lokale Videoerzeugung befindet sich noch in der aktiven Entwicklung und LTX-2.3 ist ein großartiger Einstieg in die Welt des „Heimat-Hollywoods“.
Links
https://github.com/comfyanonymous/ComfyUI
https://huggingface.co/Lightricks/LTX-Video
