pipeline_tag: 文本生成视频 library_name: diffusers tags:

• 文本生成视频
• 图像生成视频

非官方Diffusers格式权重，适用于https://huggingface.co/Lightricks/LTX-Video（版本0.9.0）。

文本生成视频：

import torch
from diffusers import LTXPipeline
from diffusers.utils import export_to_video

pipe = LTXPipeline.from_pretrained("a-r-r-o-w/LTX-Video-diffusers", torch_dtype=torch.bfloat16)
pipe.to("cuda")

prompt = "一位棕色长发、肤色白皙的女子对另一位金色长发的女子微笑。棕发女子穿着黑色夹克，右脸颊有一颗几乎不可见的小痣。镜头采用特写角度，聚焦于棕发女子的面部。光线温暖自然，可能来自落日，为场景投下柔和的光晕。整个画面宛如真实拍摄的生活片段"
negative_prompt = "低画质，动作不连贯，模糊，抖动，变形"

video = pipe(
    prompt=prompt,
    negative_prompt=negative_prompt,
    width=704,
    height=480,
    num_frames=161,
    num_inference_steps=50,
).frames[0]
export_to_video(video, "output.mp4", fps=24)

图像生成视频：

import torch
from diffusers import LTXImageToVideoPipeline
from diffusers.utils import export_to_video, load_image

pipe = LTXImageToVideoPipeline.from_pretrained("a-r-r-o-w/LTX-Video-diffusers", torch_dtype=torch.bfloat16)
pipe.to("cuda")

image = load_image(
    "https://huggingface.co/datasets/a-r-r-o-w/tiny-meme-dataset-captioned/resolve/main/images/8.png"
)
prompt = "一个年轻女孩平静地站在前景处直视镜头，背景是熊熊燃烧的房屋火灾。火焰吞噬建筑结构，浓烟滚滚升空。穿着防护服的消防员冲向现场，后方可见标有'38'的消防车。女孩淡然的表情与火灾的混乱形成鲜明对比，营造出令人动容的情感张力场景。"
negative_prompt = "低画质，动作不连贯，模糊，抖动，变形"

video = pipe(
    image=image,
    prompt=prompt,
    negative_prompt=negative_prompt,
    width=704,
    height=480,
    num_frames=161,
    num_inference_steps=50,
).frames[0]
export_to_video(video, "output.mp4", fps=24)