阿里通义实验室XR实验室近期开源了两个强大的文生3D模型:Text-to-ND和Text-to-ND-MV,这两个模型能够根据简单的文本描述生成相应的3D模型和纹理。此次开源不仅包含基础版本,还提供了Multi-View版本,以满足不同开发者对算法精细度的需求。更重要的是,实验室还同步开源了模型优化代码,实现了从文本直接生成3D模型的完整流程,大大降低了开发门槛。
阿里通义实验室 XR 实验室开源了文生 3D 新模型,可以通过一句文本描述生成对应的 3D 模型及纹理。开源的模型包括 Text-to-ND 和 Text-to-ND-MV 两个大模型。通义实验室 XR 实验室开源了 Text-to-ND 的基础版本以及 Multi-View 版本,满足不同细粒度的算法开发需求。还同步开源了从大模型中蒸馏出(Score Distillation Sampling)3D 模型的优化代码,串联可以完成文本直接到 3D 模型的生成。
此次阿里通义实验室的开源举措,为3D建模领域带来了新的活力,方便了广大开发者进行相关研究和应用开发,有望推动文生3D技术在更多领域的应用与发展。开源的模型和代码也为未来3D建模技术的进步提供了重要的基础。