Usei imagens geradas incorretamente pela IA para fazer um fine-tuning mais inteligente do Stable Diffusion XL
(minimaxir.com)- O Stable Diffusion XL 1.0 (SDXL), lançado como open source, oferece suporte à geração de imagens em resolução 1024x1024
- O SDXL é fornecido em dois modelos, Base e Refine, e como o modelo Refine não causa perda de velocidade, é melhor usar esse
- Dá para fazer hacks usando a biblioteca Python Diffusers
- Recursos como Prompt Weighting e Dreambooth LoRA são possíveis
- Ao treinar a LoRA com imagens incorretas usando o prompt negativo
wrong, a qualidade melhorou
2 comentários
Que boa ideia.
Eu nunca tinha pensado em usar LoRA ao contrário. Gerar imagens estranhas de propósito, treinar com LoRA e depois colocar a palavra-chave como negativa...
Parece uma ideia simples, mas vendo os exemplos dá para achar bem surpreendente como isso parece ser muito eficaz.