Spectro-2B
SVECTOR-CORPORATION
Texto a video
Modelo de generación de vídeo de SVECTOR con 2.000 millones de parámetros. Utiliza un Transformer3DModel de 28 capas para procesar relaciones espaciales y temporales, junto con un CausalVideoAutoencoder que comprime y reconstruye el vídeo en un espacio latente. Genera vídeo a 768 × 512 píxeles y 24 FPS.
Como usar
Clona el repositorio:
git clone https://huggingface.co/SVECTOR-CORPORATION/Spectro-2B.git
Instala las dependencias:
pip install -r requirements.txt
Ejecuta la generación de vídeo:
python generate_video.py --input "input_data.mp4" --output "output_video.mp4"
Funcionalidades
- Generación de vídeo mediante una arquitectura Transformer3DModel con 32 cabezas de atención.
- Procesamiento coherente de información espacial y temporal mediante embeddings posicionales RoPE.
- Salida de vídeo a 768 × 512 píxeles y 24 FPS.
- Compresión latente eficiente mediante CausalVideoAutoencoder con 128 canales latentes.
- Atención propia y atención cruzada para capturar relaciones entre fotogramas y contexto global.
- Conexiones residuales para conservar características visuales durante la compresión y reconstrucción.
Casos de uso
- Creación de vídeos para entretenimiento, educación y publicidad.
- Generación de contenido para simulaciones, videojuegos y experiencias de realidad virtual o aumentada.
- Edición de vídeo asistida por IA, incluidas mejoras y transformaciones automatizadas.