license: creativeml-openrail-m library_name: diffusers inference: true pipeline_tag: text-to-video tags:

• 文本生成视频
• 文本生成图像

Text2Video-Zero模型卡片 - ControlNet Canny神秘风格

Text2Video-Zero是一个零样本文本生成视频工具。它能实现零样本文本生成视频、视频指令引导Pix2Pix编辑（指令引导的视频编辑）、文本与姿态条件视频生成、文本与边缘检测条件视频生成，以及文本、边缘检测与Dreambooth条件视频生成。欲了解更多信息，请参阅我们的论文和演示： 我们的代码兼容任何StableDiffusion基础模型。

本模型提供神秘风格的DreamBooth权重，用于结合边缘引导（使用ControlNet）的文本生成视频零样本任务。

Text2Video-Zero权重

我们将原始权重转换为diffusers格式，并通过以下方式使其适用于ControlNet的边缘引导：https://github.com/lllyasviel/ControlNet/discussions/12。

模型详情

• 开发者： Levon Khachatryan, Andranik Movsisyan, Vahram Tadevosyan, Roberto Henschel, Zhangyang Wang, Shant Navasardyan和Humphrey Shi

• 模型类型： 具备边缘控制的Dreambooth文本生成图像及文本生成视频模型，专为text2video zero设计

• 语言： 英语

• 许可证： CreativeML OpenRAIL M许可证

• 模型描述： 这是一个支持边缘引导和神秘风格的text2video zero模型。它也可在文本生成图像场景中结合ControlNet进行边缘引导使用。

• DreamBooth关键词： 神秘风格

• 更多资源： GitHub, 论文, CIVITAI

• 引用方式：

  @article{text2video-zero,
    title={Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators},
    author={Khachatryan, Levon and Movsisyan, Andranik and Tadevosyan, Vahram and Henschel, Roberto and Wang, Zhangyang and Navasardyan, Shant and Shi, Humphrey},
    journal={arXiv preprint arXiv:2303.13439},
    year={2023}
  }