Runway lanza un nuevo modelo de red neuronal para crear videos a partir de una descripción de texto

La inteligencia artificial que convierte texto en imagen ya es real convencional, pero las redes neuronales similares para video solo están ganando impulso. A la vanguardia de esta dirección está la startup Runway, que liberado ya el segundo modelo de IA que genera videos cortos basados ​​en varias palabras.

Runway ofrece un editor de video basado en la web que se especializa en herramientas de aprendizaje automático, como la eliminación de fondos. Esta empresa ayudó a desarrollar el modelo de texto a imagen de difusión estable, y en febrero Anunciado su primer modelo de edición de video AI Gen-1.

Gen-1 se centró en convertir imágenes existentes, lo que permitió a los usuarios aplicar un estilo particular de superposición de imagen a carrete. El modelo Gen-2 está más enfocado en crear videos desde cero.

Las demostraciones compartidas en Runway son cortas, inestables y ciertamente no fotorrealistas, pero incluso tales marcos demuestran una buena comprensión de la IA del espacio tridimensional, las proporciones y la lógica del movimiento objetos.

Si bien Gen-2 no está disponible gratuitamente, un portavoz de Runway aseguró que la compañía "brindará un amplio acceso en las próximas semanas".

Las perspectivas de la introducción de dicha IA ya están asustando a los expertos. Después de todo, las redes neuronales para trabajar con video prometen no solo nuevas posibilidades creativas, sino también nuevas amenazas a la desinformación.