Cseti/Wan-LoRA-Arcane-Jinx-v2
Cseti
Texto a video
Adaptador LoRA para Wan2.1-T2V-1.3B que genera vídeos con la estética de Arcane y una representación inspirada en Jinx. Esta versión prioriza un mejor seguimiento de las instrucciones y reduce la transferencia involuntaria de rasgos a otros personajes, aunque su efecto es algo más débil. Fue entrenada exclusivamente con 35 vídeos durante 85 épocas y está destinada a investigación y proyectos de fans no comerciales.
Como usar
Instalación y uso con Diffusers:
pip install -U diffusers transformers accelerate
import torch
from diffusers import DiffusionPipeline
from diffusers.utils import export_to_video
# Cambia a "mps" para dispositivos Apple
pipe = DiffusionPipeline.from_pretrained(
"Wan-AI/Wan2.1-T2V-1.3B",
torch_dtype=torch.bfloat16,
device_map="cuda"
)
pipe.load_lora_weights("Cseti/Wan-LoRA-Arcane-Jinx-v2")
prompt = "csetiarcane. Nfj1nx lounges on a hammock strung between two trees, her long blue hair spilling around her like a waterfall. She’s dressed in a simple, comfy summer dress, her bare feet propped up against the hammock’s edge. She looks at the camera with a sweet, relaxed smile, one hand resting behind her head as the other holds a cold drink with a small umbrella. The surrounding garden is lush with greenery, and the light creates a warm, inviting glow around her, enhancing the casual and carefree atmosphere"
output = pipe(prompt=prompt).frames[0]
export_to_video(output, "output.mp4")
Se recomiendan prompts largos y descriptivos, una intensidad de 0,9 a 1,0 y las palabras de activación csetiarcane, Nfj1nx y blue hair. Si el estilo o el personaje no aparecen con suficiente claridad, puede añadirse animation style, aunque esto puede producir resultados demasiado caricaturescos.
Funcionalidades
- Generación de texto a vídeo mediante un LoRA para Wan2.1-T2V-1.3B.
- Reproduce una estética de animación inspirada en Arcane y rasgos asociados con Jinx, como el pelo azul.
- Mejora el seguimiento de prompts respecto a versiones anteriores.
- Reduce la contaminación de estilo o rasgos entre distintos personajes.
- Funciona mejor con prompts largos y descriptivos.
- Intensidad recomendada del LoRA: entre 0,9 y 1,0.
- Compatible con Diffusers, los nodos nativos de ComfyUI y el wrapper de Kijai para ComfyUI.
- Palabras de activación: `csetiarcane`, `Nfj1nx` y `blue hair`.
- Entrenado con vídeos usando Diffusion-Pipe, rango 128 y optimizador `adamw_optimi`.
- No está destinado a uso comercial debido a su relación con personajes y elementos protegidos de Arcane.
Casos de uso
- Crear vídeos de fans inspirados en la estética visual de Arcane.
- Generar escenas animadas protagonizadas por un personaje inspirado en Jinx.
- Investigar el ajuste de modelos de texto a vídeo mediante adaptadores LoRA.
- Prototipar secuencias narrativas o cinemáticas animadas con Wan2.1.
- Experimentar con consistencia de personajes y transferencia de estilo en vídeos generativos.