sdxl-wrong-lora
minimaxir
Texto a imagen
Un LoRA para SDXL 1.0 Base que mejora la calidad de la imagen de salida después de cargarlo y usar 'wrong' como un prompt negativo durante la inferencia. Puedes probar la generación de imágenes usando este LoRA en este Colab Notebook. El LoRA también está disponible en formato safetensors para otras interfaces de usuario como A1111; sin embargo, este LoRA fue creado usando diffusers y no puedo garantizar su eficacia fuera de ella.
Como usar
El LoRA se puede cargar usando load_lora_weights como cualquier otro LoRA en diffusers:
import torch
from diffusers import DiffusionPipeline, AutoencoderKL
vae = AutoencoderKL.from_pretrained(
"madebyollin/sdxl-vae-fp16-fix",
torch_dtype=torch.float16
)
base = DiffusionPipeline.from_pretrained(
"stabilityai/stable-diffusion-xl-base-1.0",
vae=vae,
torch_dtype=torch.float16,
variant="fp16",
use_safetensors=True
)
base.load_lora_weights("minimaxir/sdxl-wrong-lora")
_ = base.to("cuda")
Durante la generación de imagen, usa 'wrong' como el prompt negativo. ¡Eso es todo!
Funcionalidades
- Mayor detalle en texturas/telas, particularmente a resolución completa de 1024x1024.
- Mayor saturación y vibrancia de colores.
- Mayor nitidez para objetos borrosos/fondos.
- Mejor en manos anatómicamente correctas.
- Menos probabilidades de tener artefactos aleatorios.
- Parece permitir que el modelo siga el prompt de entrada con un comportamiento más esperado, particularmente con el peso del prompt como la sintaxis de Compel.
Casos de uso
- Generación de imágenes con mayor detalle en texturas y telas.
- Mejor en la creación de imágenes hiperrealistas con colores vibrantes.
- Generación de imágenes con manos anatómicamente correctas.
- Creación de imágenes sin artefactos aleatorios.