许可证:其他
许可证名称:flux-1-dev-non-commercial-license
许可证链接:https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/LICENSE.md
语言:
-
英文
标签:
-
flux
-
diffusers
-
lora
-
replicate
基础模型:"black-forest-labs/FLUX.1-dev"
管道标签:文本生成图像
小部件:
-
文本:'丝网印刷T恤设计,一只快乐的猫举着牌子,上面写着“我爱VE REPLICATE”,LNTP插画风格'
输出:
网址:"images/1.webp"
-
文本:"一件T恤,LNTP插画风格"
输出:
网址:"images/2.webp"
-
文本:"一个弹钢琴的小女孩,黄色背景,LNTP插画风格"
输出:
网址:"images/3.webp"
-
文本:"一本书,封面上写着'不要惊慌!',致敬《银河系漫游指南》,LNTP卡通风格"
输出:
网址:"images/4.webp"
-
文本:"一个机器人,蓝色背景,LNTP插画风格"
输出:
网址:"images/5.webp"
-
文本:"女孩,橙色背景,LNTP插画风格"
输出:
网址:"images/6.webp"
实例提示:LNTP
Flux latentpop
flux-latentpop以充满活力的背景和粗犷的有限丝网印刷色彩效果为特色。
它非常适合T恤设计、一般插画和角色肖像。
它是在Replicate上训练的,地址如下:https://replicate.com/ostris/flux-dev-lora-trainer/train
训练集由23张在MidJourney上生成的图像组成,使用了--sref 3102110963
和--personalize 3xdy3qw
标志。你可以在本仓库中找到完整的训练集:./2024-08-24-latentpop.zip
以下是我使用的训练参数,这些参数对于插画/卡通风格的Flux LoRAs效果相当不错:
{
"steps": 1300,
"lora_rank": 24,
"optimizer": "adamw8bit",
"batch_size": 4,
"resolution": "512,768,1024",
"autocaption": true,
"input_images": "https://replicate.delivery/pbxt/Lg3C1KUPfrRZZvJFaaSTmQ9qtAyXSonLvLSuTuj4Nop9vcSu/2024-08-24-latentpop.zip",
"trigger_word": "LNTP",
"learning_rate": 0.0002,
"autocaption_suffix": "LNTP style",
"caption_dropout_rate": 0.05,
}
特别感谢X上的@ciguleva,他最初在X上分享了这个sref:https://x.com/ciguleva/status/1827398343779098720
使用方法
你应该使用LNTP
来触发图像生成。输出图像在guidance_scale
约为2.5
时看起来更具风格特色。
from diffusers import AutoPipelineForText2Image
import torch
pipeline = AutoPipelineForText2Image.from_pretrained('black-forest-labs/FLUX.1-dev', torch_dtype=torch.float16).to('cuda')
pipeline.load_lora_weights('jakedahn/flux-latentpop', weight_name='lora.safetensors')
image = pipeline('你的提示').images[0]
更多详情,包括权重、合并和融合LoRAs,请查看diffusers中加载LoRAs的文档