Kuaishouは、3D認識能力を持ち、ControlNetのビデオバージョンとして知られている新しいテキストからビデオへの生成フレームワークCinemasterを立ち上げ、ユーザーに前例のない創造的自由を提供します。生成されたビデオコンテンツの正確な制御を実現するために、ユーザーはテキストプロンプトとその他の制御信号などのテキストプロンプトと制御信号を介してビデオ内のオブジェクトの位置とカメラの動きを正確に制御できます。 これは、AIビデオ生成テクノロジーを新しいレベルにマークし、ビデオの作成効率と創造的な表現機能を大幅に改善します。
Cinemasterの中心的な利点は、その強力な制御能力です。ユーザーは、従来のテキストプロンプトを介してビデオを生成するだけでなく、深さマップ、カメラトラック、オブジェクトラベルなどの制御信号に基づいて、より創造的でパーソナライズされた作品を作成するために、細かい調整を行うこともできます。 Kuaishouはまた、大規模なビデオから3D境界ボックスとカメラトラックを抽出するための一連のプロセスを提供し、Cinemasterのトレーニングとアプリケーションに強力なデータサポートを提供します。 Cinemasterのプロジェクトページはオンラインであり、興味のあるユーザーはCinemaster-dev.github.io/にアクセスできます。
Cinemasterの出現は、AIビデオ生成の分野が開発の新しい波と便利な操作方法を案内しようとしていることを示しています。 私たちは、より多くの驚きと革新をもたらすために、Cinemasterの未来を楽しみにしています。