A Runway entrou em pânico e realizou uma coletiva de imprensa por vídeo na noite passada. Cinco novos vídeos e modelos mundiais foram lançados diretamente: Em primeiro lugar, temos o modelo de vídeo Gen 4.5, que agora suporta a geração e edição de áudio original. O modelo de edição de vídeo ALF suporta a edição de vídeos de qualquer duração e com múltiplas tomadas, garantindo consistência em personagens, iluminação e ambiente. Eles lançaram seu primeiro modelo geral do mundo, o GWM1, um modelo autorregressivo treinado na Gen 4.5 que pode fazer previsões subsequentes quadro a quadro com base no conteúdo anterior. Os usuários podem intervir e tomar medidas a qualquer momento durante o processo de geração de streaming. GWM Worlds é um modelo de simulação de ambiente em tempo real que permite aos usuários criar um ambiente imersivo com geometria, iluminação e propriedades físicas corretas, descrevendo a cena ou fornecendo referências de imagem, possibilitando a exploração e a interação. Os avatares GWM são modelos humanos digitais de alta fidelidade, modelos de geração de vídeo em tempo real controlados por áudio que podem simular movimentos humanos naturais e microexpressões, simulando tanto pessoas reais realistas quanto personagens animados. O modelo de simulação de IA para robôs e física da GWM Robotics não apenas aprende a dinâmica de interações bem-sucedidas, mas também simula cenários de falha, o que é crucial para o aprendizado de robôs e será usado para avaliação de políticas e geração de dados sintéticos.
