🚀 Luna Diffusion模型

Luna Diffusion是一个基于Stable Diffusion 1.5微调的文本到图像生成模型，能够生成空灵、富有绘画感的图像，在多种图像生成场景中表现出色。

🚀 快速开始

此模型的使用方式与其他Stable Diffusion模型相同。更多信息，请查看 Stable Diffusion Pipeline。

from diffusers import StableDiffusionPipeline
import torch

model_id = "proximasanfinetuning/luna-diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "painting of a beautiful woman with red hair, 8k, high quality"
image = pipe(prompt, height=768, width=768).images[0]

image.save("./result.jpg")

✨ 主要特性

• 绘画风格：该模型在几百张大多带有手动标注的高分辨率图像上基于SD 1.5进行微调，能生成空灵、富有绘画感的图像。
• 灵活提示词：无需特定触发词或标记，但在提示词中添加 "painting" 可增强绘画效果；使用 "illustration" 可生成更具矢量艺术感的图像。
• 分辨率适配：在768x768 px、512x768 px或768x512 px分辨率下效果最佳，因为模型是在768x768分辨率上微调的，512x512分辨率可能会使图像过度处理。
• 采样器适配：DPM++ 2M采样器通常能生成清晰的图像，Euler_a采样器则可生成更柔和的图像。
• 肤色支持：模型经过微调，能很好地处理不同肤色的指定。

📦 安装指南

你可以通过以下方式获取模型：

• Diffusers库：使用上述快速开始中的代码示例，通过 diffusers 库加载模型。
• CKPT格式：从 CKPT 下载。
• Safetensors格式：从 Safetensors 下载。

💻 使用示例

基础用法

from diffusers import StableDiffusionPipeline
import torch

model_id = "proximasanfinetuning/luna-diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "painting of a beautiful woman with red hair, 8k, high quality"
image = pipe(prompt, height=768, width=768).images[0]

image.save("./result.jpg")

高级用法

from diffusers import StableDiffusionPipeline
import torch

model_id = "proximasanfinetuning/luna-diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

# 为了生成更柔和的图像，使用Euler_a采样器
from diffusers import EulerAncestralDiscreteScheduler
pipe.scheduler = EulerAncestralDiscreteScheduler.from_config(pipe.scheduler.config)

prompt = "illustration of a fantasy world, 8k, high quality"
negative_prompt = "nude, naked"
image = pipe(prompt, negative_prompt=negative_prompt, height=768, width=768).images[0]

image.save("./advanced_result.jpg")

📚 详细文档

模型使用建议

• 若不希望生成包含胸部的图像，建议在负提示词中添加 "nude, naked"。
• 查看 博客文章 以获取更多示例、对比和设置提示。

用户作品展示

• 查看 stablecog.com 上用户使用该模型生成的精彩图像：示例1 示例2 等。
• 查看 Twitter上的话题标签。

支持作者

如果你喜欢该模型，可以请作者喝咖啡或成为月度支持者：

📄 许可证

该模型遵循修改后的CreativeML OpenRAIL - M许可证。

• 商业使用限制：在盈利、将盈利或计划盈利或接受捐赠的平台上使用和托管Luna Diffusion模型及其衍生产品需要事先授权。如需申请许可，请发送电子邮件至proximasan@protonmail.com。
• 模型卡和文件托管：可以在商业和非商业网站、应用等上托管模型卡和文件，只要正确注明模型全名并提供模型卡链接 (https://huggingface.co/proximasanfinetuning/luna-diffusion)，且不进行实际推理或微调。
• 非商业托管：Luna Diffusion模型及其衍生产品可以托管在非商业网站、应用等上，只要不接受收入或捐赠。必须正确注明模型全名并包含模型卡链接 (https://huggingface.co/proximasanfinetuning/luna-diffusion)。
• 商业输出使用：模型或其衍生产品的输出可用于商业目的，只要使用限于10人或更少的团队。
• 合法合规：不得使用模型故意生成或分享非法或有害的输出或内容。
• 输出所有权：作者对生成的输出不主张任何权利，你可以自由使用它们，并对其使用负责，使用不得违反许可证中的规定。
• 权重再分发：可以重新分发权重，但必须包含与许可证中相同的使用限制，并向所有用户分享修改后的CreativeML OpenRAIL - M许可证副本（请完整仔细阅读许可证）。完整许可证请见：https://huggingface.co/proximasanfinetuning/luna-diffusion/blob/main/luna_diffusion_license.txt 。

模型信息

⚠️ 重要提示

使用模型时请遵守许可证规定，不得用于非法或有害目的。

💡 使用建议

建议在提示词中合理使用 "painting"、"illustration" 等关键词，以获得理想的图像风格；根据需求选择合适的采样器和分辨率。