다음은 Zhipu가 오늘 오픈소스로 공개한 SCAIL, RealVideo, Kaleido, SSVAE 등 4가지 비디오 소프트웨어 제품군 링크입니다. 이 제품군은 포즈, 실시간 스트리밍 및 다중 에이전트 모드를 지원합니다. RealVideo는 다른 스트리밍 서비스들과 마찬가지로 2~3초의 초기 음성 지연, 3초 음성 복제 기능을 통해 실시간 스트리밍 비디오를 생성하고 아바타 업로드를 지원합니다. 수 분 동안 연속적인 대화 또는 음성 비디오를 출력할 수 있어 가상 앵커가 2초 만에 방송을 시작할 수 있습니다. SCAIL은 배우의 사진만 제공하고 3D 골격 애니메이션을 추가하면 공중제비나 스트리트 댄스와 같은 복잡한 다인물 인터랙티브 장면을 생성할 수 있으며, 배우의 움직임이 일관성을 유지하고 장애물이 움직임을 방해하지 않도록 보장합니다. 또한 다중 에이전트 비디오 생성 프레임워크인 Kaleido와 스펙트럼 구조 변분 오토인코더인 VAE(SSVAE)도 있습니다. #AI 비디오 #AI 라이브 스트리밍 #GLM
SCAIL-미리보기 암호: hgithub.com/zai-org/SCAIL github.com/zai-org/SCAIL-… 모델:huggingface.co/zai-org/SCAIL-…Gmodelscope.cn/models/ZhipuAI…XSn 리얼비디오 코드github.com/zai-org/RealVi…kE 모huggingface.co/zai-org/RealVi…gmodelscope.cn/models/ZhipuAI…GdBj6 칼레이도 github.com/zai-org/KaleidoJlguW 모델: https://t.co/0rpcHg1YzD https://t.co/lAFNHJ8yDk SSVAE 코드: https://t.co/J9e2EsbNRz 모델: