Zhipuが本日オープンソース化した4つのビデオスイート(SCAIL、RealVideo、Kaleido、SSVAE)へのリンクはこちらです。ポーズ、リアルタイムストリーミング、マルチエージェントモードをカバーしています。 RealVideoは、2~3秒の初期音声遅延、3秒の音声クローン作成、アバターアップロード機能を備えたリアルタイムストリーミングビデオを生成し、数分間にわたる連続した会話やスピーチビデオを出力できるため、バーチャルキャスターはわずか2秒で放送を開始できます。 SCAIL は、俳優の写真を用意し、3D スケルトン アニメーションを追加するだけで、宙返りやストリート ダンスなどの複雑な複数人物のインタラクティブ ショットを生成できるため、俳優の動きが一貫しており、障害物が妨げられることがありません。 マルチエージェントビデオ生成フレームワーク Kaleido や、スペクトル構造化変分オートエンコーダ VAE SSVAE もあります。 #AI ビデオ #AI ライブストリーミング #GLM
SCAILプレビュー コード: hgithub.com/zai-org/SCAIL github.com/zai-org/SCAIL-… モデル:huggingface.co/zai-org/SCAIL-…Gmodelscope.cn/models/ZhipuAI…XSn リアルビデオ コードgithub.com/zai-org/RealVi…kE モデhuggingface.co/zai-org/RealVi…gmodelscope.cn/models/ZhipuAI…GdBj6 カレイド コgithub.com/zai-org/KaleidolguW モデル: https://t.co/0rpcHg1YzD https://t.co/lAFNHJ8yDk SSVAE コード: https://t.co/J9e2EsbNRz モデル: