xreborn/ohwx2_wan-lora
xreborn
Texto a video
LoRA para el modelo base Wan2.2-T2V-A14B-Diffusers-bf16, entrenada con AI Toolkit by Ostris. Está orientada a generar contenido visual activado por el prompt específico "ohwx girl" y puede usarse con Diffusers o herramientas locales compatibles con LoRA.
Como usar
Instalación y uso con Diffusers para texto a video:
pip install -U diffusers transformers accelerate
import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video
# switch to "mps" for apple devices
pipe = DiffusionPipeline.from_pretrained("ai-toolkit/Wan2.2-T2V-A14B-Diffusers-bf16", dtype=torch.bfloat16, device_map="cuda")
pipe.load_lora_weights("xreborn/ohwx2_wan-lora")
prompt = "ohwx girl"
output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")
Ejemplo alternativo indicado en la ficha del modelo:
from diffusers import AutoPipelineForText2Image
import torch
pipeline = AutoPipelineForText2Image.from_pretrained('ai-toolkit/Wan2.2-T2V-A14B-Diffusers-bf16', torch_dtype=torch.bfloat16).to('cuda')
pipeline.load_lora_weights('xreborn/ohwx2_wan-lora', weight_name='ohwx2_wan_low_noise.safetensors')
image = pipeline('ohwx girl').images[0]
image.save("my_image.png")
Funcionalidades
- Adaptador LoRA para generación texto-a-video sobre Wan2.2-T2V-A14B-Diffusers-bf16.
- Incluye pesos en formato Safetensors disponibles en la pestaña Files & versions.
- Compatible con flujos locales como ComfyUI, AUTOMATIC1111, SD.Next, Invoke AI y Draw Things.
- No está desplegado actualmente en proveedores de inferencia de Hugging Face.
- Usa la palabra disparadora "ohwx girl" para activar el estilo o sujeto aprendido.
Casos de uso
- Generar videos o imágenes con el sujeto/estilo asociado al disparador "ohwx girl".
- Integrar una LoRA ligera en flujos locales de generación con Diffusers o interfaces compatibles.
- Probar variantes del modelo Wan2.2-T2V-A14B mediante carga de pesos LoRA en Safetensors.