只需两分钟实现 AI文字转视频、图片转视频

摘要：它结合了当前最先进的扩散模型技术和变换器架构，能够实现以下核心功能：实时生成能力：以 768x512 的分辨率生成 24 FPS 的视频，生成速度甚至快于观看速度。高分辨率与多样性：模型在大规模数据集上训练，生成的视频不仅清晰，而且内容丰富，适合各种主题和

本期将为大家详细介绍 LTX-Video —— 一款能够将文字和图片转化为高质量视频的强大工具。

无论你是视频制作的爱好者，还是探索新技术的实践者，相信都能从中获得启发。

1. 在深入了解 LTX-Video 的功能之前，我们先一睹它的风采。以下是通过LTX-Video该工具生成的部分画面：

2. LTX-Video 的核心技术与优势LTX-Video 是业内首个基于 DiT（Diffusion Transformer）架构的视频生成模型。

它结合了当前最先进的扩散模型技术和变换器架构，能够实现以下核心功能：实时生成能力：以 768x512 的分辨率生成 24 FPS 的视频，生成速度甚至快于观看速度。高分辨率与多样性：模型在大规模数据集上训练，生成的视频不仅清晰，而且内容丰富，适合各种主题和风格的创作。LTX-Video 的应用场景十分广泛，无论是广告视频制作、短视频内容生成，还是艺术创作，都能发挥其独特优势。

3. 结合 ComfyUI 的灵活操作在 LTX-Video 的使用中，ComfyUI 起到了至关重要的作用。
ComfyUI 是什么？它是一种模块化和灵活的用户界面，常用于基于扩散模型的图像和视频生成。通过 ComfyUI，用户可以像搭积木一样配置生成流程，包括：
拖拽式操作：用户通过简单的拖拽就可以调整模型参数和生成逻辑。自定义场景生成：支持输入文本、图片等多种素材，并灵活调整分辨率、帧率、视频长度等参数。通过这一工具，即使是非技术背景的用户，也能轻松生成个性化的视频内容。

4. LTX-Video 的硬件需求

AI 视频生成虽然令人兴奋，但也对硬件提出了较高的要求，尤其是显卡的计算能力和显存大小。目前市场上主流的高性能显卡，如 NVIDIA 4090，仍可能在长时间生成高分辨率视频时出现显存不足的情况。

为什么我不制作这个的一键启动包？由于LTX-Video 的一键启动包并不适合大多数用户使用。因为它所需要的显存比较大，大部分用户的电脑的GPU基本不会超过16G显存的，所以尽量使用云部署的方式来使用

5. 如何通过仙宫云部署 LTX-Video以下是详细的云端部署步骤，适合零基础用户：
第一步：注册账户访问仙宫云注册页面，完成注册流程。

第二步：点击链接进入 LTX-Video 镜像主页，点击“立即部署”。

并在右侧顶部选择显卡有且只有4090可选。

选择显卡后，点击确认部署即可。

第三步：启动容器部署完成后，等待容器显示“正在部署”，变更为“运行中”。

即可启动 WebUI 进入 ComfyUI 界面。

第四步：加载工作流文件点击界面左侧文件夹图标，加载预设的 JSON 文件（包含文字生成视频、图片生成视频等工作流）。

第五步：点击文字转视频.json, 调整参数并生成视频

用户可以根据需求修改提示词、视频的宽高、帧数、帧率等参数，最后点击“Queue”即可生成视频。

生成过程中，可以在页面顶部查看进度。

进入到界面看到是英文状态，你也可以点击左下角设置切换为中文。

6. 如何优化提示词写作提示词的质量对LTX-Video生成结果至关重要。

以下是编写高质量提示词的建议：
描述具体：用细致的语言描述动作、场景和细节。遵循时间顺序：按照事件发生的顺序组织语言，避免冗长或混乱的表达。增加视觉元素：包括摄像机角度、光线、颜色和背景元素等描述。简洁直观：提示词最好控制在 200 字以内，同时保持流畅和具体。例如：
A person walks into a sunlit forest, the camera follows from a low angle as sunlight filters through the leaves, casting dappled patterns on the ground. The scene transitions smoothly to a flowing stream, the camera pans to follow the water, capturing its shimmering surface.

7. 参数调节指南在生成视频时，以下参数设置尤为重要：
分辨率：建议使用 720p 或以下分辨率以平衡质量与性能。种子值：保留种子值以便重复生成类似的视频风格。引导尺度（Guidance Scale）：推荐值为 3-3.5，确保生成的内容既逼真又具有一致性。推理步骤：更多步骤（如 40+）适合追求细节，较少步骤（如 20-30）适合快速生成。

8. 下载已经生成好的文件。

comfyUI顶部的进度完成消失后，并且右侧有视频图片预览显示时。