Cosmik4-lora

visionmaster2

Texto a video

Adaptador LoRA de visionmaster2 para el modelo base Wan2.2-T2V-A14B-Diffusers-bf16. Se activa con la palabra clave «CosmikR» y ofrece pesos en formato Safetensors. La página lo clasifica como un modelo de texto a vídeo, aunque también incluye un ejemplo para generar imágenes mediante Diffusers.

Como usar

Instala las dependencias:
pip install -U diffusers transformers accelerate

Ejemplo de generación de vídeo con Diffusers:
import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video

# Usa "mps" en dispositivos Apple
pipe = DiffusionPipeline.from_pretrained(
    "ai-toolkit/Wan2.2-T2V-A14B-Diffusers-bf16",
    torch_dtype=torch.bfloat16,
    device_map="cuda"
)
pipe.load_lora_weights("visionmaster2/Cosmik4-lora")

prompt = "CosmikR"
output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")

Ejemplo incluido en la ficha para cargar el archivo LoRA específico y generar una imagen:
from diffusers import AutoPipelineForText2Image
import torch

pipeline = AutoPipelineForText2Image.from_pretrained(
    "ai-toolkit/Wan2.2-T2V-A14B-Diffusers-bf16",
    torch_dtype=torch.bfloat16
).to("cuda")

pipeline.load_lora_weights(
    "visionmaster2/Cosmik4-lora",
    weight_name="Cosmik4_low_noise.safetensors"
)

image = pipeline("CosmikR").images[0]
image.save("my_image.png")

Funcionalidades

Adaptador LoRA basado en ai-toolkit/Wan2.2-T2V-A14B-Diffusers-bf16.
Palabra de activación: CosmikR.
Pesos disponibles en formato Safetensors.
Entrenado con AI Toolkit de Ostris.
Compatible con Diffusers y herramientas como ComfyUI, AUTOMATIC1111, SD.Next, Invoke AI y Draw Things.
Licencia CreativeML Open RAIL-M.
No está desplegado actualmente por ningún proveedor de inferencia.

Casos de uso

Generar vídeos condicionados por texto con el estilo o concepto aprendido por el LoRA Cosmik4.
Aplicar el adaptador Cosmik4 al modelo base Wan2.2 mediante Diffusers.
Generar imágenes activando el LoRA con la palabra clave «CosmikR».
Integrar los pesos Safetensors en flujos locales compatibles, como ComfyUI o Invoke AI.