Remade-AI/Lego

Remade-AI
Texto a video

LoRA de texto a vídeo para Wan2.1 14B T2V que genera animaciones con estética de piezas, figuras y escenarios de Lego. Fue entrenado durante 35 épocas con un minuto de vídeo compuesto por 25 clips cortos de distintas escenas de estilo Lego.

Como usar

Instala las dependencias y carga el LoRA sobre el modelo base Wan2.1 14B T2V:

pip install -U diffusers transformers accelerate

import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video

# Cambia a "mps" para dispositivos Apple
pipe = DiffusionPipeline.from_pretrained(
    "Wan-AI/Wan2.1-T2V-14B",
    dtype=torch.bfloat16,
    device_map="cuda"
)
pipe.load_lora_weights("Remade-AI/Lego")

prompt = "l3g0_5ty13 Lego animation style, a close-up shot of a Lego pirate minifigure with a black tricorn hat, an eye patch, and a red coat. He is holding a silver cutlass in his right hand, and a small Lego parrot is perched on his shoulder. The background is a blurry mix of blue and brown Lego bricks resembling an ocean scene."

output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")

Para ComfyUI, utiliza el archivo lego_35_epochs.safetensors con el flujo wan_txt2vid_lora_workflow.json y conecta un nodo Wan LoRA al modelo base. Incluye al principio del prompt la frase de activación l3g0_5ty13 Lego animation style.

Funcionalidades

Adaptador LoRA basado en Wan-AI/Wan2.1-T2V-14B.
Genera vídeos con una estética de animación Lego mediante la frase de activación «l3g0_5ty13 Lego animation style».
Ofrece resultados consistentes con distintos tipos de objetos y escenas.
Pesos disponibles en formato Safetensors.
Compatible con Diffusers y con un flujo modificado de Wan Video Wrapper para ComfyUI.
Ajustes recomendados: intensidad LoRA 1.0, escala de guía integrada 6.0 y Flow Shift 5.0.
Licencia Apache 2.0.

Casos de uso

Crear cortometrajes y secuencias animadas con figuras y escenarios de Lego.
Transformar descripciones de personajes, vehículos, animales o entornos en vídeos de estilo Lego.
Producir escenas espaciales, urbanas, de aventura o cinematográficas construidas visualmente con bloques.
Generar material creativo para prototipos, narraciones visuales y contenido para redes sociales.