阿里通義實驗室XR實驗室近期開源了兩個強大的文生3D模型:Text-to-ND和Text-to-ND-MV,這兩個模型能夠根據簡單的文字描述產生對應的3D模型和紋理。此次開源不僅包含基礎版本,還提供了Multi-View版本,以滿足不同開發者對演算法精細度的需求。更重要的是,實驗室也同步開源了模型最佳化程式碼,實現了從文字直接產生3D模型的完整流程,大大降低了開發門檻。
阿里通義實驗室XR 實驗室開源了文生3D 新模型,可以透過一句文字描述產生對應的3D 模型及紋理。開源的模型包括Text-to-ND 和Text-to-ND-MV 兩個大模型。通義實驗室XR 實驗室開源了Text-to-ND 的基礎版本以及Multi-View 版本,滿足不同細粒度的演算法開發需求。也同步開源了從大模型中蒸餾出(Score Distillation Sampling)3D 模型的最佳化程式碼,串聯可以完成文字直接到3D 模型的生成。
這次阿里通義實驗室的開源舉措,為3D建模領域帶來了新的活力,方便了廣大開發者進行相關研究和應用開發,並有望推動文生3D技術在更多領域的應用與發展。開源的模型和程式碼也為未來3D建模技術的進步提供了重要的基礎。