许可证：creativeml-openrail-m
基础模型：kyujinpy/Tune-A-VideKO-disney
训练提示词：一只熊在弹吉他
标签：

• tune-a-video
• 文本生成视频
• diffusers
• 韩语
  推理：不支持

Tune-A-VideKO-万物

GitHub仓库：Kyujinpy/Tune-A-VideKO

模型描述

• 基础模型：kyujinpy/KO-stable-diffusion-disney
• 训练提示词：一只熊在弹吉他
  

生成示例

测试提示词：一只兔子在弹吉他，现代迪士尼风格

测试提示词：一位英俊的王子在弹吉他，现代迪士尼风格

测试提示词：一只狮子在弹吉他，现代迪士尼风格

使用方法

克隆GitHub仓库

git clone https://github.com/showlab/Tune-A-Video.git  

运行推理代码

from tuneavideo.pipelines.pipeline_tuneavideo import TuneAVideoPipeline  
from tuneavideo.models.unet import UNet3DConditionModel  
from tuneavideo.util import save_videos_grid  
import torch  

pretrained_model_path = "kyujinpy/KO-stable-diffusion-disney"  
unet_model_path = "kyujinpy/Tune-A-VideKO-disney"  
unet = UNet3DConditionModel.from_pretrained(unet_model_path, subfolder='unet', torch_dtype=torch.float16).to('cuda')  
pipe = TuneAVideoPipeline.from_pretrained(pretrained_model_path, unet=unet, torch_dtype=torch.float16).to("cuda")  
pipe.enable_xformers_memory_efficient_attention()  

prompt = "一只狮子在弹吉他，现代迪士尼风格"  
video = pipe(prompt, video_length=14, height=512, width=512, num_inference_steps=50, guidance_scale=7.5).videos  

save_videos_grid(video, f"./{prompt}.gif")  

相关论文：

• Tune-A-Video：通过单样本微调实现文本到视频生成的图像扩散模型
• Stable Diffusion：基于潜在扩散模型的高分辨率图像合成