XLabs-AI/flux-ip-adapter

XLabs-AI

Texto a imagen

Este repositorio proporciona un checkpoint de IP-Adapter para el modelo FLUX.1-dev de Black Forest Labs. IP-Adapter está entrenado a una resolución de 512x512 por 50k pasos y 1024x1024 por 25k pasos y funciona para ambas resoluciones. El modelo está en entrenamiento y lanzamos nuevos checkpoints regularmente. ¡Hemos lanzado la versión v1 - que se puede usar directamente en ComfyUI!

Como usar

Para probar nuestros modelos, tienes 2 opciones:
# Usar main.py de nuestro repositorio oficial

O
# Usar nuestros nodos personalizados para ComfyUI y probarlo con los flujos de trabajo proporcionados (ver carpeta /workflows)

  1. Ir a `ComfyUI/custom_nodes`
  2. Clonar `x-flux-comfyui`, la ruta debe ser `ComfyUI/custom_nodes/x-flux-comfyui/*`
  3. Ir a `ComfyUI/custom_nodes/x-flux-comfyui/` y ejecutar `python setup.py`
  4. Actualizar `x-flux-comfy` con `git pull` o reinstalarlo.
  5. Descargar `Clip-L model.safetensors` de OpenAI VIT CLIP grande, y colocarlo en `ComfyUI/models/clip_vision/*`.
  6. Descargar nuestro `IPAdapter` de huggingface, y colocarlo en `ComfyUI/models/xlabs/ipadapters/*`.
  7. Usar los nodos `Flux Load IPAdapter` y `Apply Flux IPAdapter`, elegir el modelo CLIP correcto y disfrutar de tus generaciones.

  Puedes encontrar un flujo de trabajo de ejemplo en la carpeta `workflows` en este repositorio.

Funcionalidades

Adaptador de IP entrenado en resoluciones 512x512 y 1024x1024
Actualizaciones regulares de checkpoints
Compatible con nodos personalizados de ComfyUI
Disponible para uso en FLUX.1-dev de Black Forest Labs

Casos de uso

Generación de imágenes a partir de texto
Creación de arte digital
Exploración avanzada de IA
Aplicaciones en investigación y desarrollo de IA