许可证: 其他
许可证名称: stabilityai非商业研究社区许可
许可证链接: LICENSE
标签:
- 文生图
- 稳定扩散
额外授权提示: >-
点击"同意"即表示您同意许可协议
并确认已知晓Stability AI的隐私政策。
额外授权字段:
姓名: 文本
电子邮箱: 文本
国家: 国家选择
所属机构: 文本
是否接收Stability AI产品、服务及研究的电子邮件更新与促销信息?:
类型: 选择
选项:
- '是'
- '否'
我确认该模型仅限非商业用途,除非获得Stability AI的额外许可: 复选框
语言:
- 英文
管道标签: 文生图
稳定扩散3中型版

模型架构

稳定扩散3中型版是一款多模态扩散变换器(MMDiT)文生图模型,在图像质量、文字排版、复杂提示理解及资源效率方面均有显著提升。
技术细节请参阅研究报告。
请注意:本模型依据Stability非商业研究社区许可发布。如需创作者许可或企业许可,请访问Stability.ai或联系我们获取商业授权详情。
模型说明
- 开发方: Stability AI
- 模型类型: MMDiT文生图生成模型
- 模型描述: 本模型可根据文本提示生成图像,采用多模态扩散变换器架构(https://arxiv.org/abs/2403.03206),集成三个固定预训练文本编码器(OpenCLIP-ViT/G、CLIP-ViT/L及T5-xxl)
授权条款
- 非商业用途: 本模型遵循Stability AI非商业研究社区许可,允许学术研究等非商业用途免费使用。
- 商业用途: 未经Stability另行授权不得用于商业场景。专业艺术家、设计师及创作者可申请创作者许可,详情请访问https://stability.ai/license。
模型资源
本地部署推荐使用ComfyUI进行推理。
本模型已接入Stability API平台。
SD3系列模型及工作流可在Stable Assistant及Discord平台的Stable Artisan获取。
- ComfyUI: https://github.com/comfyanonymous/ComfyUI
- StableSwarmUI: https://github.com/Stability-AI/StableSwarmUI
- 技术报告: https://stability.ai/news/stable-diffusion-3-research-paper
- 演示平台: https://huggingface.co/spaces/stabilityai/stable-diffusion-3-medium
训练数据集
我们采用合成数据与筛选后的公开数据进行训练。模型预训练涉及10亿张图像,微调数据包含3000万张聚焦特定视觉内容与风格的高质量美学图像,以及300万张偏好数据图像。
Diffusers库调用方法
请确保安装最新版diffusers
:pip install -U diffusers
,随后可运行:
import torch
from diffusers import StableDiffusion3Pipeline
pipe = StableDiffusion3Pipeline.from_pretrained("stabilityai/stable-diffusion-3-medium-diffusers", torch_dtype=torch.float16)
pipe = pipe.to("cuda")
image = pipe(
"一只举着'Hello World'标牌的猫咪",
negative_prompt="",
num_inference_steps=28,
guidance_scale=7.0,
).images[0]
image
优化配置及图生图支持详见官方文档。
使用场景
适用场景
包括但不限于:
- 艺术创作与设计流程辅助
- 教育或创意工具开发
- 生成模型相关研究(含模型局限性分析)
所有使用行为须符合可接受使用政策。
非适用场景
本模型未针对人物/事件的事实性呈现进行训练,生成此类内容超出模型设计范围。
安全规范
我们贯彻"安全设计"理念,从预训练阶段到持续开发、微调及部署全程实施安全措施。虽已部署多重安全缓解方案以降低严重危害风险,仍建议开发者根据具体用例进行额外测试与防护。完整安全策略详见安全中心。
评估方法
通过结构化评估与内外部红队测试,重点检测儿童性虐待/剥削、极端暴力、血腥内容、色情素材及非自愿裸露等严重危害。测试主要基于英语环境,可能无法覆盖所有潜在风险。与其他模型类似,本模型可能偶现不准确、偏见或不当的输出内容。
已知风险及缓解措施:
- 有害内容:虽采用过滤数据集并部署安全机制,仍无法完全杜绝有害内容生成。开发者应根据产品策略部署内容安全护栏。
- 滥用风险:技术限制结合用户教育可降低恶意使用概率。所有用户须遵守可接受使用政策,包括微调与提示工程场景。
- 隐私风险:建议开发者遵循隐私法规,采用数据隐私保护技术。
联系渠道
问题反馈请联系:
- 安全问题: safety@stability.ai
- 安全问题: security@stability.ai
- 隐私问题: privacy@stability.ai
- 授权咨询: https://stability.ai/license
- 企业授权: https://stability.ai/enterprise