Runway a paniqué et a tenu une conférence de presse vidéo hier soir. Cinq nouvelles vidéos et maquettes du monde ont été publiées directement : Tout d'abord, il y a son modèle vidéo Gen 4.5, qui prend désormais en charge la génération et l'édition audio originale. Le modèle de montage vidéo ALF prend en charge le montage de vidéos de toute longueur et de plusieurs plans, garantissant la cohérence des personnages, de l'éclairage et de l'environnement. Ils ont publié leur premier modèle du monde général, GWM1, un modèle autorégressif entraîné sur la génération 4.5, capable d'effectuer des prédictions image par image à partir du contenu précédent. Les utilisateurs peuvent intervenir et agir à tout moment pendant le processus de génération en continu. GWM Worlds est un modèle de monde de simulation d'environnement en temps réel qui permet aux utilisateurs de créer un environnement immersif avec une géométrie, un éclairage et des propriétés physiques corrects en décrivant la scène ou en fournissant des références d'images, permettant ainsi l'exploration et l'interaction. Les avatars GWM sont des modèles humains numériques haute fidélité, des modèles de génération vidéo en temps réel pilotés par l'audio, capables de simuler des mouvements humains naturels et des micro-expressions, simulant à la fois des personnes réelles réalistes et des personnages animés. Le modèle de simulation d'IA de robots et de physique de GWM Robotics apprend non seulement les dynamiques d'interaction réussies, mais simule également les scénarios d'échec, ce qui est crucial pour l'apprentissage des robots et sera utilisé pour l'évaluation des politiques et la génération de données synthétiques.
