Раньше создание видео с помощью нейросетей было прерогативой облачных сервисов вроде Runway или Luma. Сегодня, если у вас есть современная видеокарта Nvidia, вы можете генерировать качественные ролики прямо на своем компьютере. В этой заметке я расскажу, как настроить локальную генерацию видео с помощью ComfyUI и эффективной модели LTX-2.3.
Инструменты для видео-генерации
Для работы нам понадобятся:
— ComfyUI: мощный интерфейс с узловой архитектурой, который позволяет гибко настраивать процесс генерации.
— LTX-2.3: современная модель от Lightricks, оптимизированная для создания плавных и детализированных видео при относительно умеренных требованиях к видеопамяти.
Требования к железу
Генерация видео — процесс куда более ресурсоемкий, чем работа с изображениями:
— Видеокарта (GPU): Nvidia RTX с 8 ГБ VRAM — это необходимый минимум для разрешения 768×512. Для комфортной работы и более высоких разрешений крайне желательно иметь 16–24 ГБ VRAM.
— Оперативная память (RAM): минимум 32 ГБ. Видео-модели и VAE занимают много места при загрузке.
— Место на диске: около 500 ГБ для самой модели и сопутствующих компонентов.
Настройка и запуск
Процесс запуска LTX-2.3 в ComfyUI выглядит следующим образом:
1. Обновите ComfyUI: Модель относительно новая, поэтому убедитесь, что у вас установлена последняя версия интерфейса.
2. Установите Workflow: Самый простой способ — найти готовый JSON-шаблон для LTX Video. Модель требует специфических узлов для работы с латентным пространством видео.
3. Промпт и параметры: Введите описание сцены на английском языке. Обратите внимание, что LTX-2.3 хорошо понимает движение (например, «camera orbits around», «fast movement»).
Почему стоит выбрать LTX-2.3?
LTX-2.3 примечательна тем, что она дает результат, сопоставимый с закрытыми облачными сервисами, но работает локально. Это дает вам:
— Полную приватность: ваши промпты и сгенерированные видео не уходят на чужие сервера.
— Контроль: вы можете экспериментировать с частотой кадров (FPS), разрешением и силой влияния промпта без необходимости платить за каждую попытку.
Локальная генерация видео всё еще находится в стадии активного развития, и LTX-2.3 — это отличный входной билет в мир «домашнего Голливуда».
Ссылки
https://github.com/comfyanonymous/ComfyUI
https://huggingface.co/Lightricks/LTX-Video
Добавить комментарий