Eye-Close-Up

Remade-AI
Texto a video

Adaptador LoRA para Wan2.1 14B T2V que genera vídeos con primeros planos extremos de ojos descritos mediante texto. Puede representar ojos humanos, animales o fantásticos, y también funciona con modelos Wan2.1 I2V cuando la imagen inicial muestra un rostro con claridad.

Como usar

Instala las dependencias y carga el LoRA sobre Wan2.1 T2V:

pip install -U diffusers transformers accelerate
import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video

# switch to "mps" for apple devices
pipe = DiffusionPipeline.from_pretrained(
    "Wan-AI/Wan2.1-T2V-14B",
    dtype=torch.bfloat16,
    device_map="cuda"
)
pipe.load_lora_weights("Remade-AI/Eye-Close-Up")

prompt = "3y3_cl053 eye extreme close up, The video shows a close up of a green cat-like eye with a shimmering emerald iris, resembling the Cheshire Cat."
output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")

También puede utilizarse en ComfyUI mediante el flujo Wan T2V modificado, conectando un nodo Wan LoRA al modelo base. La intensidad LoRA recomendada es 1.0.

Funcionalidades

Entrenado sobre el modelo base Wan2.1 14B T2V.
Genera acercamientos detallados de ojos humanos, animales y fantásticos.
Compatible con flujos T2V y con modelos Wan2.1 I2V cuando el rostro de entrada es claramente visible.
Utiliza la frase activadora «3y3_cl053 eye extreme close up».
Pesos disponibles en formato Safetensors.
Incluye un flujo modificado para ComfyUI con un nodo Wan LoRA.
Ajustes recomendados: intensidad LoRA 1.0, Embedded Guidance Scale 6.0 y Flow Shift 5.0.
Entrenado durante 10 épocas con 18 clips cortos de primeros planos de ojos.

Casos de uso

Crear vídeos con acercamientos cinematográficos a ojos humanos o animales.
Animar ojos fantásticos con iris brillantes, patrones de humo, estrellas u otros efectos visuales.
Generar una transición desde un retrato hasta un primer plano extremo del ojo.
Producir planos de detalle para vídeos creativos, escenas de fantasía o material audiovisual estilizado.
Aplicar el efecto de acercamiento a una imagen facial mediante modelos Wan2.1 I2V.