Runway entró en pánico y realizó una videoconferencia de prensa anoche. Se lanzaron directamente cinco nuevos videos y modelos mundiales: En primer lugar, está su modelo de video Gen 4.5, que ahora admite la generación y edición de audio original. El modelo de edición de video ALF admite la edición de videos de cualquier duración y múltiples tomas, lo que garantiza la consistencia en los personajes, la iluminación y el entorno. Lanzaron su primer modelo general del mundo, GWM1, un modelo autorregresivo entrenado en Gen 4.5 que puede realizar predicciones cuadro por cuadro basadas en el contenido anterior. Los usuarios pueden intervenir y tomar medidas en cualquier momento durante el proceso de generación de la transmisión. GWM Worlds es un modelo mundial de simulación de entorno en tiempo real que permite a los usuarios crear un entorno inmersivo con geometría, iluminación y propiedades físicas correctas describiendo la escena o proporcionando referencias de imágenes, lo que permite la exploración y la interacción. Los avatares de GWM son modelos humanos digitales de alta fidelidad, modelos de generación de video en tiempo real impulsados por audio que pueden simular movimientos humanos naturales y microexpresiones, simulando tanto personas reales realistas como personajes animados. El modelo de simulación de IA de física y robots de GWM Robotics no solo aprende dinámicas de interacción exitosas, sino que también simula escenarios de falla, lo cual es crucial para el aprendizaje del robot y se utilizará para la evaluación de políticas y la generación de datos sintéticos.
