Un nouveau travail intéressant sur la génération vidéo en temps réel avec contrôle de mouvement. MotionStream permet un streaming avec une latence inférieure à la seconde sur un seul GPU. Vous pouvez également contrôler quelles parties d'une image bougent et lesquelles restent immobiles, comme dans la vidéo ci-dessous. 👏 à @xxunhuang, @jhshin2000 et à toute l'équipe !
@xxunhuang @jhshin2000 Leur approche permet des cas d'utilisation vraiment intéressants, au-delà du simple déplacement d'un objet ou d'un personnage. Par exemple, vous pouvez également déplacer la caméra dans une scène (exemple du haut)... ou utiliser les points de suivi de mouvement d'une vidéo de référence pour « animer » une nouvelle image (exemple du bas).