메타코퍼레이션(Meta Corporation)은 최근 사실적인 질감과 소재로 고품질 3D 모델을 빠르고 효율적으로 생성할 수 있는 새로운 텍스트 생성 3D 모델 기술인 Meta3D Gen(3DGen)을 출시했습니다. 이 획기적인 기술은 Meta3D AssetGen과 Meta3D TextureGen의 두 가지 핵심 구성 요소를 결합하여 3D 모델 생성의 효율성과 품질을 크게 향상시켜 사용자에게 전례 없는 경험을 선사합니다. 3DGen은 속도와 품질 면에서 기존 솔루션을 능가하며 게임 개발, 가상 현실, 메타버스 등의 영역에 새로운 가능성을 제공합니다.
최근 연구원들은 Meta3D Gen(3D Gen)이라는 새롭고 빠른 텍스트 생성 3D 모델 기술을 출시했습니다. 3D Gen은 고품질 텍스처와 재료를 사용하여 효율적인 방식으로 3D 모델을 생성하여 사용자에게 완전히 새로운 경험을 선사합니다.
이 새로운 시스템은 두 가지 주요 구성 요소, 즉 3D 메시 생성을 위한 Meta 3D AssetGen과 텍스처 생성을 위한 Meta 3D TextureGen을 결합합니다. 이러한 기술은 함께 작동하여 고해상도 텍스처와 PBR(물리 기반 렌더링) 자료로 3D 자산을 생성합니다. Meta에 따르면 이 프로세스는 기존 솔루션보다 3~10배 빠릅니다.
Meta3D AssetGen
그 중 Meta3D AssetGen(AssetGen)은 1분 이내에 고품질 3D 자산 생성을 달성할 수 있는 텍스트 생성 3D 분야의 획기적인 혁신입니다. AssetGen은 실제 조명 효과를 통해 강력한 텍스트-3D 및 텍스트-텍스처 생성 기능을 달성하기 위해 물리적 기반 렌더링(PBR) 자료를 생성합니다.
AssetGen은 먼저 그림자 및 반사 채널에 대한 모양 정보를 포함하여 개체의 여러 보기를 생성한 다음 효율적인 감독을 위해 지연된 음영 손실을 사용하여 3D 공간에서 색상, 금속성 및 거칠기를 재구성합니다. 또한 부호 있는 거리 함수를 사용하여 3D 모양을 보다 안정적으로 표현하고 직접적인 모양 감독을 위해 해당 손실을 도입합니다. 메모리 효율성을 향상시키기 위해 이 방법은 융합 컨볼루션 커널을 사용합니다. 메쉬를 추출한 후 UV 공간에서 텍스처를 다듬는 변환기는 텍스처의 선명도와 디테일을 크게 향상시킵니다.
AssetGen은 최고의 경쟁 방법에 비해 모따기 거리가 17% 향상되고 LPIPS가 40% 향상되었으며, 동일한 속도로 업계 최고의 경쟁업체를 대상으로 한 인간 선호도 테스트에서 72%의 선호도를 달성했습니다.
Meta3D TextureGen
연구원들은 또한 20초 이내에 임의의 복잡성을 지닌 기하학적 구조에 대해 고품질의 전역적으로 일관된 텍스처를 생성하도록 설계된 두 개의 순차 네트워크로 구성된 새로운 순방향 접근 방식인 Meta3D TextureGen을 도입했습니다.
이 방법은 텍스트로 생성된 이미지 모델을 2D 공간의 3D 의미론적 조건과 결합하고 이를 완전한 고해상도 UV 텍스처 맵으로 융합함으로써 품질과 속도 측면에서 최첨단 결과를 달성합니다.
또한 연구원들은 4K 픽셀 해상도에서 텍스처를 생성하기 위해 어떤 규모로든 텍스처를 업스케일할 수 있는 텍스처 향상 네트워크를 도입했습니다.
공식 블로그: https://ai.meta.com/research/publications/meta-3d-gen/
하이라이트:
-Meta 3D Gen 시스템은 1분 이내에 고품질 3D 자산을 생성합니다.
- Meta3D Gen은 Meta3D AssetGen과 Meta3DTextureGen의 두 가지 핵심 기술을 통합합니다.
- AssetGen은 사실적인 재조명 효과를 갖춘 물리적 기반 렌더링 자료 생성을 지원합니다.
- Meta3D TextureGen은 복잡한 형상에 대해 고품질 텍스처를 빠르게 생성하는 방법입니다.
Meta3D Gen의 등장은 텍스트 생성 3D 모델 기술의 획기적인 발전을 의미합니다. 그 효율성, 높은 품질 및 사용 용이성은 3D 콘텐츠 제작 분야의 발전을 크게 촉진하고 모든 계층에 무한한 가능성을 가져다 줄 것입니다. 앞으로는 Meta3D Gen이 더 많은 분야에 적용되고 최적화될 것으로 기대됩니다.