東京工業大学とマサチューセッツ工科大学が共同で立ち上げた Stream Diffusion フレームワークは、わずか 8 日間で GitHub で 6,100 個以上のスターを獲得し、このフレームワークがリアルタイムのインタラクティブ画像生成の分野で非常に魅力的であることを示しています。このフレームワークの革新性は、効率的なストリーム バッチ ノイズ除去テクノロジーにあり、消費電力を大幅に削減しながら、RTX3060 および RTX4090 グラフィックス カードで 91FPS 以上のフレーム レートを達成します。これは、リアルタイム画像生成アプリケーションの開発に重大な影響を及ぼします。
東京工業大学と MIT などの大学が共同で Stream Diffusion フレームワークをオープンソース化し、8 日間で 6,100 個の星を収集し、革新的なリアルタイムのインタラクティブな画像生成を実現し、効率的なストリーム バッチ ノイズ除去を実現しました。テスト後、RTX3060 と RTX4090 のフレーム レートは 91FPS を超え、消費電力が大幅に削減されました。このプロジェクトはリアルタイム画像生成の分野に活力を吹き込み、商用アプリケーションにとって重要なツールになることが期待されています。
Stream Diffusionフレームワークは、高性能かつ低消費電力であることから、ゲーム、仮想現実、拡張現実などの分野での幅広い活用が期待されており、リアルタイム画像生成技術の実用化が促進されます。また、そのオープンソースの性質により、より多くの開発者が参加し、このテクノロジーの進歩と開発を共同で促進することが容易になります。将来が楽しみです。