Text2Video-Zero ControlNet Canny Anime

PAIR
Texto a video

Text2Video-Zero es un generador de video a partir de texto sin necesidad de entrenamiento previo (zero-shot). Puede realizar generación de video a partir de texto, edición de video guiada por instrucciones (Video Instruct Pix2Pix), generación de video condicional a texto y pose, generación de video condicional a texto y bordes canny, y generación de video condicional a texto, bordes canny y DreamBooth. Este modelo proporciona pesos de DreamBooth para el estilo Anime utilizando la guía de bordes (usando ControlNet) en text2video zero.

Como usar

Funcionalidades

Generación de video a partir de texto sin necesidad de entrenamiento previo (zero-shot text-to-video generation).
Edición de video guiada por instrucciones (Video Instruct Pix2Pix).
Generación de video condicional a texto y pose.
Generación de video condicional a texto y bordes canny.
Generación de video condicional a texto, bordes canny y DreamBooth.

Casos de uso

Generación de videos animados a partir de descripciones textuales.
Edición de videos siguiendo instrucciones específicas.
Generación de videos que incorporen poses específicas descritas en texto.
Generación de videos que utilicen bordes canny como guía visual.
Creación de videos de estilo Anime a partir de texto con guía de bordes.