LTXV_13B_LoRA_Dance_from_gui12

naomiKenKorem

Texto a video

Adaptación LoRA de LTXV_13B_097_DEV, entrenada con datos personalizados para generar vídeos de una mujer bailando mediante los flujos de texto a vídeo e imagen a vídeo de LTXV.

Como usar

Instala las dependencias y carga el modelo con Diffusers:
pip install -U diffusers transformers accelerate

import torch
from diffusers import DiffusionPipeline

# Cambia a "mps" para dispositivos Apple
pipe = DiffusionPipeline.from_pretrained(
    "naomiKenKorem/LTXV_13B_LoRA_Dance_from_gui12",
    dtype=torch.bfloat16,
    device_map="cuda"
)
prompt = "Astronaut in a jungle, cold color palette, muted colors, detailed, 8k"
image = pipe(prompt).images[0]

Para usar el LoRA entrenado en ComfyUI, copia el archivo de pesos .safetensors en la carpeta models/loras. Después, añade el nodo «LTXV LoRA Selector» para seleccionar el archivo y conéctalo a «LTXV LoRA Loader» para aplicarlo a la generación. Los flujos de referencia de texto a vídeo e imagen a vídeo están disponibles en el repositorio oficial de LTXV para ComfyUI.

Funcionalidades

Ajuste fino LoRA sobre el modelo base LTXV_13B_097_DEV
Especializado en escenas de baile, con el ejemplo de validación «a woman is dancing»
Compatible con generación de texto a vídeo e imagen a vídeo
Entrenado durante 251 pasos con una tasa de aprendizaje de 0,0002 y un tamaño de lote de 1
Integración con ComfyUI mediante los nodos LTXV LoRA Selector y LTXV LoRA Loader

Casos de uso

Generar vídeos de una mujer bailando a partir de una descripción textual
Aplicar movimiento de baile a una imagen de referencia mediante un flujo de imagen a vídeo
Incorporar un LoRA especializado en baile a flujos de trabajo de LTXV en ComfyUI