Die Erzeugung realistischer Texturen in der 3D-Modellierung war schon immer ein Forschungsschwerpunkt. Kürzlich haben die University of Alberta, die University of Toronto und das Noah's Ark Laboratory von Huawei gemeinsam eine neue Methode namens TexGen entwickelt. Diese Methode kann entsprechende 3D-Texturen basierend auf von Benutzern bereitgestellten Textbeschreibungen generieren, und ihre Wirkung ist deutlich besser als bei bestehenden . Es gibt Technologie. Der Kern von TexGen liegt in der aufmerksamkeitsgesteuerten Multi-View-Sampling-Strategie und der Noise-Resampling-Technologie. Erstere gewährleistet die Konsistenz von Texturen unter verschiedenen Betrachtungswinkeln, während letztere Texturdetails schützt und die Texturbearbeitungsmöglichkeiten verbessert. Die Forschungsergebnisse haben hinsichtlich Texturqualität, Blickwinkelkonsistenz und Detailreichtum erhebliche Fortschritte gemacht.
Im Bereich der 3D-Modellierung war die Erzeugung realistischer Texturen schon immer ein schwieriges Problem. Kürzlich haben Forscher der University of Alberta, der University of Toronto und des Noah's Ark Laboratory von Huawei gemeinsam eine neue Methode eingeführt: TexGen. Diese Technologie kann 3D-Texturen erzeugen, die der Textbeschreibung des Benutzers entsprechen, und ihre Wirkung ist deutlich besser als bei bestehenden ähnlichen Technologien.
TexGen führt außerdem eine aufmerksamkeitsgesteuerte Multi-View-Sampling-Strategie ein, mit der die Aussehensinformationen der Textur zwischen verschiedenen Ansichten übertragen werden können, wodurch sichergestellt wird, dass die generierte Textur bei jeder Ansicht konsistent ist.
Um Texturdetails zu bewahren, entwickelte das Forschungsteam außerdem eine Rausch-Resampling-Technik, die dabei helfen kann, Rauschen abzuschätzen und geeignete Eingaben für nachfolgende Entrauschungsschritte zu generieren. Auf diese Weise erzielt TexGen nicht nur einen Durchbruch bei der Texturgenerierung, sondern zeichnet sich auch durch die Texturbearbeitung aus, da es Anpassungen unter Beibehaltung der ursprünglichen Identität vornehmen kann.
Nach umfangreichen qualitativen und quantitativen Auswertungen stellte das Forschungsteam fest, dass TexGen bei der Generierung von Texturqualität, perspektivischer Konsistenz und reichhaltigen Erscheinungsbilddetails verschiedener 3D-Objekte eine hervorragende Leistung erbrachte und damit die aktuellen, hochmodernen Methoden übertraf.
Nachfolgend finden Sie einen Vergleich von TexGen mit TEXTure, Text2Tex, Fantasia3D und ProlificDreamer
Hier sind einige Effekte zu zeigen:
Höhepunkte:
TexGen kann aus Textbeschreibungen hochwertige 3D-Texturen generieren und so die Probleme bei der Naht- und Überglättung herkömmlicher Methoden lösen.
?Einführung eines Multi-View-Sampling- und Resampling-Frameworks, um die Texturkonsistenz zwischen den einzelnen Ansichten sicherzustellen.
?️ Durch die neue Noise-Resampling-Technologie funktioniert TexGen auch bei der Texturbearbeitung gut und kann den ursprünglichen Stil beibehalten.
Das Aufkommen von TexGen hat dem Bereich der 3D-Modellierung neue Möglichkeiten eröffnet. Seine effizienten textgesteuerten Texturgenerierungsfunktionen und die präzise Steuerung von Details werden die Modellierungseffizienz und Texturqualität erheblich verbessern. Wir freuen uns auf die zukünftige Leistung von TexGen in weiteren Anwendungsszenarien.