以前,使用神经网络创建视频是 Runway 或 Luma 等云服务的特权。如今,如果您拥有现代 Nvidia 显卡,您就可以直接在计算机上生成高质量视频。在这篇文章中,我将告诉您如何使用 ComfyUI 和有效的 LTX-2.3 模型设置本地视频生成。

视频生成工具
对于工作,我们需要:
– ComfyUI:强大的界面,采用基于节点的架构,允许您灵活地自定义生成过程。
– LTX-2.3: Lightricks 的现代型号,经过优化,可以以相对适中的视频内存要求创建流畅且详细的视频。
硬件要求
生成视频是一个比处理图像更加消耗资源的过程:
– 显卡 (GPU): 具有 8 GB VRAM 的 Nvidia RTX 是 768×512 分辨率的最低要求。为了舒适的操作和更高的分辨率,非常需要 16-24 GB 的 VRAM。
– 随机存取存储器 (RAM): 至少 32 GB。下载时视频模型和 VAE 会占用大量空间。
– 磁盘空间: 模型本身和相关组件约 500 GB。
设置和启动
ComfyUI中启动LTX-2.3的流程如下:
1. 更新ComfyUI:该模型相对较新,因此请确保您安装了最新版本的界面。
2. 安装工作流程:最简单的方法是找到现成的 LTX Video JSON 模板。该模型需要特定的节点来处理视频潜在空间。
3. 提示和参数:用英文输入场景描述。请注意,LTX-2.3 能够很好地理解运动(例如“摄像机绕轨道运行”、“快速运动”)。
为什么选择LTX-2.3?
LTX-2.3 之所以引人注目,是因为它提供的结果与专有云服务相当,但在本地运行。这给你:
– 完全隐私:您的提示和生成的视频不会发送到其他人的服务器。
– 控制:您可以尝试帧速率 (FPS)、分辨率和提示强度,而无需为每次尝试付费。
本地视频生成仍在积极开发中,LTX-2.3 是进入“家庭好莱坞”世界的绝佳入口。
链接
https://github.com/comfyanonymous/ComfyUI
https://huggingface.co/Lightricks/LTX-Video