快手推出全新文本到视频生成框架CineMaster,该框架具备3D感知能力,被誉为视频版本的ControlNet,为用户提供了前所未有的创作自由度。它允许用户通过文本提示以及深度图、相机轨迹、物体标签等控制信号,精确控制视频中物体的位 置和相机运动,实现对生成视频内容的精准把控。 这标志着AI视频生成技术迈向新的高度,将极大提升视频创作效率和创意表达能力。
CineMaster 的核心优势在于其强大的控制能力。用户不仅可以通过传统的文本提示来生成视频,还能结合深度图、相机轨迹、物体标签等控制信号进行精细调整,从而创作出更具创意和个性化的作品。快手还提供了一套从大规模视频中提取3D 边界框和相机轨迹的流程,为 CineMaster 的训练和应用提供了强大的数据支持。CineMaster 的项目页面已上线,感兴趣的用户可以访问cinemaster-dev.github.io/。
CineMaster 的出现,预示着AI视频生成领域即将迎来新的发展浪潮,其强大的控制能力和便捷的操作方式,必将为用户带来更丰富的创作体验,并推动视频内容创作的进一步发展。 期待未来CineMaster能带来更多惊喜和创新。