Kuaishou는 3D 인식 기능을 보유하고 있으며 Controlnet의 비디오 버전으로 알려져있는 새로운 텍스트-비디오 세대 프레임 워크 Cinemaster를 출시하여 사용자에게 전례없는 창의적인 자유를 제공합니다. 이를 통해 사용자는 텍스트 프롬프트 및 깊이 맵, 카메라 트랙, 객체 레이블 및 기타 제어 신호와 같은 신호를 제어하여 비디오의 객체의 위치 및 카메라 이동을 정확하게 제어하여 생성 된 비디오 컨텐츠를 정확하게 제어 할 수 있습니다. 이는 AI 비디오 생성 기술을 새로운 수준으로 표시하고 비디오 제작 효율과 창의적인 표현 기능을 크게 향상시킬 것입니다.
Cinemaster의 핵심 장점은 강력한 제어 기능입니다. 사용자는 전통적인 텍스트 프롬프트를 통해 비디오를 생성 할뿐만 아니라 깊이 맵, 카메라 트랙, 객체 레이블 등과 같은 제어 신호를 기반으로 미세 조정하여보다 창의적이고 개인화 된 작품을 만듭니다. Kuaishou는 또한 대규모 비디오에서 3D 경계 박스 및 카메라 트랙을 추출하기위한 일련의 프로세스를 제공하여 Cinemaster의 교육 및 응용 프로그램에 대한 강력한 데이터 지원을 제공합니다. Cinemaster의 프로젝트 페이지는 온라인 상태이며 관심있는 사용자는 Cinemaster-dev.github.io/를 방문 할 수 있습니다.
Cinemaster의 출현은 AI 비디오 생성 분야가 강력한 제어 기능을 제공하고 편리한 운영 방법을 분명히 독창적 인 경험을 제공하고 비디오 컨텐츠 제작의 추가 개발을 촉진 할 것임을 나타냅니다. 우리는 더 많은 놀라움과 혁신을 가져 오기 위해 Cinemaster의 미래를 기대합니다.