Kotajiro/LTX23-ruri_LoRA
Kotajiro
Texto a video
LoRA para LTX-2.3 orientado a generación de video e imagen a video. Fue entrenado con imágenes y videos generados por modelos y LoRA previos del autor para SD1.5 y SDXL. Permite uso comercial de los contenidos generados si se menciona el nombre del modelo, bajo licencia CreativeML Open RAIL++-M.
Como usar
Instalación y ejemplo con Diffusers:
pip install -U diffusers transformers accelerate
import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video
# switch to "mps" for apple devices
pipe = DiffusionPipeline.from_pretrained("LTX-2.3", dtype=torch.bfloat16, device_map="cuda")
pipe.load_lora_weights("Kotajiro/LTX23-ruri_LoRA")
prompt = "A man with short gray hair plays a red electric guitar."
output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")
La configuración de generación de LTX-2.3 depende del entorno y del workflow, por lo que debe ajustarse al sistema usado.
Funcionalidades
- Adaptación LoRA para el modelo base LTX-2.3.
- Compatible con flujos Diffusers para generación de video.
- Soporta tareas de texto a video e imagen a video según la página del modelo.
- Etiquetado para contenido en japonés e inglés.
- No está desplegado en proveedores de inferencia de Hugging Face en la página indicada.
- Incluye restricciones explícitas contra violencia, pornografía infantil, representaciones sexuales de menores y contenido excesivamente sexual.
Casos de uso
- Generar videos a partir de prompts de texto con estética aprendida por el LoRA.
- Probar workflows locales de LTX-2.3 con pesos LoRA personalizados.
- Crear videos o imágenes generadas para uso comercial, siempre citando el nombre del modelo.
- Experimentar con generación audiovisual en japonés o inglés usando Diffusers.