TemporalDiff
TemporalDiff es un ajuste fino de los pesos originales de AnimateDiff en un conjunto de datos de mayor resolución (512x512). Hasta ahora, las pruebas indican un nivel más alto de coherencia en video que los pesos originales, también ajusté el intervalo de 4 a 2 cuadros para mejorar la suavidad del movimiento. Las limitaciones actuales son que el etiquetado de mi conjunto de datos fue un poco incorrecto, por lo que tiene una capacidad ligeramente reducida para interpretar el mensaje; pronto lanzaré una nueva versión que solucionará eso.
Como usar
Esto debería funcionar igual que cualquier modelo base en términos de uso, solo arrástralo y suéltalo en la interfaz de usuario cómoda o en el repositorio de Animatediff y úsalo normalmente. No requiere memoria adicional para ejecutarse, ya que las generaciones eran 512x512 antes, el entrenamiento solo se realizó a 256x256.
Funcionalidades
- Ajuste fino de los pesos originales en alta resolución (512x512)
- Mayor coherencia en video
- Intervalo ajustado de 4 a 2 cuadros para suavizar el movimiento
Casos de uso
- Generación de videos coherentes
- Utilización para animaciones suaves
- Proyectos que requieren alta resolución en video