license: creativeml-openrail-m
library_name: diffusers
inference: true
pipeline_tag: text-to-video
tags:

• text-to-video
• text-to-image

Text2Video-Zero 模型卡片 - ControlNet Canny 阿凡达风格

Text2Video-Zero 是一种零样本文本到视频生成器。它能够执行零样本文本到视频生成、视频指令引导Pix2Pix（指令引导的视频编辑）、文本和姿势条件视频生成、文本和Canny边缘条件视频生成，以及文本、Canny边缘和DreamBooth条件视频生成。如需了解更多关于这项工作的信息，请参阅我们的论文和演示：
我们的代码可与任何StableDiffusion基础模型配合使用。

此模型提供了阿凡达风格的DreamBooth权重，用于在Text2Video-Zero中结合边缘引导（使用ControlNet）进行视频生成。

Text2Video-Zero权重

我们将原始权重转换为diffusers格式，并通过以下方式使其适用于ControlNet的边缘引导：https://github.com/lllyasviel/ControlNet/discussions/12。

模型详情

• 开发者： Levon Khachatryan, Andranik Movsisyan, Vahram Tadevosyan, Roberto Henschel, Zhangyang Wang, Shant Navasardyan 和 Humphrey Shi

• 模型类型： 结合边缘控制的DreamBooth文本到图像及文本到视频生成模型，用于Text2Video-Zero

• 语言： 英语

• 许可证： CreativeML OpenRAIL M许可证。

• 模型描述： 这是一个用于Text2Video-Zero的边缘引导和阿凡达风格模型。
  它也可用于ControlNet在文本到图像设置中的边缘引导。

• DreamBooth关键词： 阿凡达风格

• 更多信息资源： GitHub, 论文, CIVITAI。

• 引用方式：

  @article{text2video-zero,  
    title={Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators},  
    author={Khachatryan, Levon and Movsisyan, Andranik and Tadevosyan, Vahram and Henschel, Roberto and Wang, Zhangyang and Navasardyan, Shant and Shi, Humphrey},  
    journal={arXiv preprint arXiv:2303.13439},  
    year={2023}  
  }  
  

原始权重

阿凡达风格的DreamBooth权重取自CIVITAI。

模型详情

• 开发者： Quiet_Joker（CIVITAI上的用户名）
• 模型类型： DreamBooth文本到图像生成模型
• 语言： 英语
• 许可证： CreativeML OpenRAIL M许可证。
• 模型描述： 这是一个使用DreamBooth创建的模型，用于根据文本提示生成阿凡达风格的图像。
• DreamBooth关键词： 阿凡达风格
• 更多信息资源： CIVITAI。

偏见内容声明：

请注意，Text2Video-Zero可能输出强化或加剧社会偏见的内容，以及逼真的面孔、色情和暴力内容。本演示中的Text2Video-Zero仅用于研究目的。

引用

  @article{text2video-zero,  
    title={Text2Video-Zero: Text-to-Image Diffusion Models are Zero-Shot Video Generators},  
    author={Khachatryan, Levon and Movsisyan, Andranik and Tadevosyan, Vahram and Henschel, Roberto and Wang, Zhangyang and Navasardyan, Shant and Shi, Humphrey},  
    journal={arXiv preprint arXiv:2303.13439},  
    year={2023}  
  }