アリババは、新しい AI ビデオ生成フレームワーク DreaMoving をオープンソース化しました。これは拡散モデルに基づいており、キャラクターの動きを正確に制御して、高度にカスタマイズされたビデオを生成できます。ユーザーはキャラクター画像と簡単なテキスト説明を入力するだけで対応するビデオを生成し、キャラクターの動き、背景、服装などの詳細を柔軟に調整できます。 DreaMoving は、Video ControlNet および Content Guider コンポーネントを通じてモーションと外観の正確な制御を実現し、AI ビデオ生成の分野における強力な汎用化機能と画期的な進歩を実証しています。これにより、クリエイティブなビデオ制作、映画やテレビの特殊効果、その他の分野に新たな可能性がもたらされます。
アリババは、拡散モデルに基づいてキャラクターの動きの理想的な制御を実現するオープンソースのフレームワーク「DreaMoving」を発表した。このフレームワークを使用すると、ユーザーはビーチで微笑む女の子、セントラルパークで踊るアジア人の女の子など、高度にカスタマイズされた人間のビデオを生成できます。 Video ControlNet および Content Guider コンポーネントを導入することで、動きと外観の正確な制御が実現します。ユーザーはポートレートと簡単なプロンプトを提供するだけで、対応するビデオを生成し、プロンプト、キャラクターの背景、服装の変更をサポートします。 DreaMoving は、AI ビデオ生成の分野で強力な一般化機能を実証しており、ガイド付きシーケンスと簡単な説明に基づいて高品質のビデオを生成できます。
DreaMoving フレームワークのオープンソースは、AI ビデオ生成技術の新たな段階を示し、その強力な機能と使いやすさは、より多くの開発者とユーザーに利便性をもたらし、さまざまな分野での AI ビデオ生成技術の応用と開発を促進する価値があります。今後のアップデートと改善を楽しみにしています。