3D モデリングにおけるリアルなテクスチャの生成は、常に研究のホットスポットです。最近、アルバータ大学、トロント大学、ファーウェイのノアの方舟研究所が協力して、TexGen と呼ばれる新しい手法を開発しました。この手法は、ユーザーが提供したテキストの説明に基づいて対応する 3D テクスチャを生成でき、その効果は既存のものよりも大幅に優れています。技術はあります。 TexGen の中核は、注意に基づくマルチビュー サンプリング戦略とノイズ リサンプリング テクノロジーにあり、前者はさまざまな視野角でのテクスチャの一貫性を確保し、後者はテクスチャの詳細を保護し、テクスチャ編集機能を向上させます。研究結果は、テクスチャの品質、視野角の一貫性、ディテールの豊かさの点で大幅な進歩をもたらしました。
3D モデリングの分野では、リアルなテクスチャをどのように生成するかが常に難しい問題でした。最近、アルバータ大学、トロント大学、ファーウェイのノアの方舟研究所の研究者が共同で新しい手法 TexGen を立ち上げました。この技術は、ユーザーのテキスト記述に対応する 3D テクスチャを生成することができ、その効果は既存の同様の技術に比べて大幅に優れています。
TexGen はまた、アテンション ガイド付きマルチビュー サンプリング戦略も導入しています。これにより、テクスチャの外観情報を異なるビュー間でブロードキャストできるため、生成されたテクスチャが各ビューで一貫していることが保証されます。
さらに、テクスチャの詳細を保存するために、研究チームはノイズを推定し、後続のノイズ除去ステップに適切な入力を生成するのに役立つノイズ リサンプリング技術も開発しました。このように、TexGen はテクスチャ生成において画期的な進歩を遂げるだけでなく、テクスチャ編集においても優れており、元のアイデンティティを維持しながら調整することができます。
広範な定性的および定量的評価の結果、研究チームは、TexGen が、さまざまな 3D オブジェクトのテクスチャ品質、遠近法の一貫性、豊かな外観の詳細を生成する点で非常に優れたパフォーマンスを示し、現在の最先端の方法を上回っていることを発見しました。
以下は、TexGen と TEXTure、Text2Tex、Fantasia3D、ProlificDreamer の比較です。
以下にいくつかの効果を示します。
ハイライト:
TexGen はテキストの説明から高品質の 3D テクスチャを生成し、従来の方法で発生した継ぎ目や過剰なスムージングの問題を解決します。
? マルチビューのサンプリングとリサンプリングのフレームワークを採用して、各ビュー間のテクスチャの一貫性を確保します。
?️ 新しいノイズ リサンプリング テクノロジーにより、TexGen はテクスチャ編集でも優れたパフォーマンスを発揮し、元のスタイルを維持できます。
TexGen の登場は、3D モデリングの分野に新たな可能性をもたらし、その効率的なテキスト駆動のテクスチャ生成機能と詳細の正確な制御により、モデリングの効率とテクスチャの品質が大幅に向上します。 将来的には、より多くのアプリケーション シナリオにおける TexGen のパフォーマンスに期待しています。