ostris/zimage_turbo_training_adapter
ostris
Texto a imagen
Adaptador LoRA de entrenamiento para afinar Tongyi-MAI/Z-Image-Turbo. Está diseñado para usarse con AI Toolkit y puede servir también como LoRA de des-destilación en inferencia para quitar el comportamiento “Turbo” de Z-Image-Turbo. Su objetivo es permitir entrenamientos cortos sobre un modelo destilado por pasos sin destruir rápidamente la destilación que le da velocidad.
Como usar
No se incluyen snippets de código en el contenido proporcionado. El uso descrito es cargar este adaptador durante el entrenamiento de una nueva LoRA sobre Tongyi-MAI/Z-Image-Turbo, entrenar la LoRA objetivo encima de él y retirar el adaptador de entrenamiento durante la inferencia para que la nueva información se ejecute sobre el modelo destilado a velocidades Turbo.
Funcionalidades
- Tipo de modelo: Text-to-Image con Diffusers y LoRA.
- Licencia: Apache 2.0.
- Modelo base: Tongyi-MAI/Z-Image-Turbo.
- Funciona como adaptador de entrenamiento para fine-tuning de Z-Image-Turbo.
- Ralentiza la degradación de la destilación por pasos durante entrenamientos cortos.
- Pensado para estilos, conceptos y personajes, donde las corridas de entrenamiento suelen ser breves.
- Puede usarse como LoRA general de des-destilación durante inferencia para reducir o eliminar el comportamiento Turbo.
- Fue creado entrenando una LoRA con miles de imágenes generadas por Z-Image-Turbo en varios tamaños y relaciones de aspecto, usando una tasa de aprendizaje baja de 1e-5.
- Limitación importante: en entrenamientos largos la destilación puede seguir degradándose y producir artefactos cuando se retire el adaptador.
Casos de uso
- Fine-tuning corto de Z-Image-Turbo para estilos visuales específicos.
- Entrenamiento de LoRAs de personajes manteniendo la velocidad del modelo destilado.
- Entrenamiento de conceptos personalizados sobre Z-Image-Turbo con menor degradación de la destilación.
- Pruebas de des-destilación en inferencia para modificar el comportamiento Turbo del modelo base.
- Flujos de entrenamiento con AI Toolkit para crear LoRAs sobre Tongyi-MAI/Z-Image-Turbo.