Qué es Stable Video Diffusion
Stable Video Diffusion es el nuevo modelo de Stability AI, construido sobre su modelo de imagen previo, Stable Diffusion. Este modelo es el primero de la compañía en el campo de generación de video y está diseñado para transformar imágenes en secuencias de video.
Cómo Acceder a Stable Video Diffusion Online
- Si sos desarrollador y querés correr el modelo localmente: El código y los pesos requeridos para operar el modelo se pueden encontrar en el repositorio de GitHub de la empresa y en su Hugging Face.
- Si querés probarlo online: Podés encontrarlo en este sitio de Replicate, y obtener tu video a partir de subir la foto que quieras.
Haciendo memes animados con Stable Video Diffusion
Uno de los primeros usos de la herramienta que se viralizó en X (ex Twitter) fue para animar memes. Te compartimos un hilo que recopila varios de ellos:
Nuestro veredicto sobre Stable Video Diffusion
Después de hacer múltiples pruebas, llegamos a la conclusión de que el modelo funciona muy bien para darle movimiento a imágenes que son animadas. Te recomendamos generar imágenes con Dall-E o MidJourney (Comparativa y descripción de ambos acá) y luego darles vida con Stable Video Diffusion.
Sin embargo, para imágenes más realistas, en particular fotos de personas, todavía encontramos bastantes problemas. Observen las siguientes imágenes de Messi, el jugador argentino de fútbol, sosteniendo la copa del mundial 2022:
Dadas estas limitaciones, Stability enfatiza que el modelo todavía está en una etapa temprana y está destinado solo para investigación. “Si bien actualizamos con entusiasmo nuestros modelos con los últimos avances y trabajamos para incorporar sus comentarios”, escribe la empresa en su sitio web, “este modelo no está destinado a aplicaciones del mundo real o comerciales en esta etapa. Sus ideas y comentarios sobre seguridad y calidad son importantes para refinar este modelo antes de su lanzamiento eventual”.
Y a vos, qué te pareció? Te invitamos a ver más aplicaciones interesantes y divertidas de Stable Video Diffusion en nuestro instagram.