La génération de textures réalistes dans la modélisation 3D a toujours été un point chaud de la recherche. Récemment, l'Université de l'Alberta, l'Université de Toronto et le laboratoire Noah's Ark de Huawei ont collaboré pour développer une nouvelle méthode appelée TexGen. Cette méthode peut générer des textures 3D correspondantes basées sur des descriptions textuelles fournies par les utilisateurs, et son effet est nettement meilleur que celui des textures existantes. .Il y a la technologie. Le cœur de TexGen réside dans la stratégie d'échantillonnage multi-vues guidée par l'attention et dans la technologie de rééchantillonnage du bruit. La première garantit la cohérence des textures sous différents angles de vue, tandis que la seconde protège les détails des textures et améliore les capacités d'édition des textures. Les résultats de la recherche ont permis des progrès significatifs en termes de qualité des textures, de cohérence des angles de vision et de richesse des détails.
Dans le domaine de la modélisation 3D, générer des textures réalistes a toujours été un problème difficile. Récemment, des chercheurs de l'Université de l'Alberta, de l'Université de Toronto et du laboratoire Noah's Ark de Huawei ont lancé conjointement une nouvelle méthode, TexGen. Cette technologie peut générer des textures 3D correspondant à la description textuelle de l'utilisateur, et son effet est nettement meilleur que les technologies similaires existantes.
TexGen introduit également une stratégie d'échantillonnage multi-vues guidée par l'attention, grâce à laquelle les informations d'apparence de la texture peuvent être diffusées entre différentes vues, garantissant ainsi que la texture générée est cohérente à chaque vue.
En outre, pour préserver les détails de la texture, l’équipe de recherche a également développé une technique de rééchantillonnage du bruit, qui peut aider à estimer le bruit et à générer des données appropriées pour les étapes de débruitage ultérieures. De cette manière, TexGen réalise non seulement une percée dans la génération de textures, mais excelle également dans l'édition de textures, capable de s'ajuster tout en conservant l'identité d'origine.
Après des évaluations qualitatives et quantitatives approfondies, l'équipe de recherche a constaté que TexGen fonctionnait extrêmement bien en générant une qualité de texture, une cohérence de perspective et des détails d'apparence riches de divers objets 3D, surpassant les méthodes de pointe actuelles.
Vous trouverez ci-dessous une comparaison de TexGen avec TEXTure, Text2Tex, Fantasia3D et ProlificDreamer.
Voici quelques effets à montrer :
Points forts:
TexGen peut générer des textures 3D de haute qualité à partir de descriptions de texte, résolvant ainsi les problèmes de couture et de lissage excessif des méthodes traditionnelles.
? Adopter un cadre d'échantillonnage et de rééchantillonnage multi-vues pour garantir la cohérence des textures entre chaque vue.
?️ La nouvelle technologie de rééchantillonnage du bruit permet à TexGen de bien fonctionner dans l'édition de textures et de conserver le style d'origine.
L'émergence de TexGen a apporté de nouvelles possibilités dans le domaine de la modélisation 3D. Ses capacités efficaces de génération de textures basées sur le texte et son contrôle précis des détails amélioreront considérablement l'efficacité de la modélisation et la qualité des textures. À l’avenir, nous attendons avec impatience les performances de TexGen dans davantage de scénarios d’application.