NVIDIA가 출시한 Edify3D 기술은 단 2분 만에 완전한 UV 맵, 4K 텍스처 및 PBR 재료를 포함한 고품질 3D 모델을 생성할 수 있습니다. 이는 의심할 여지 없이 게임 디자인, 영화 및 TV 제작, 확장 현실 분야의 판도를 바꾸는 것입니다. 혁명. 텍스트 설명이나 참조 이미지를 기반으로 하며 고유한 기술 아키텍처를 통해 멀티뷰 확산 모델과 Transformer 기반 재구성 기술을 결합하여 효율적이고 고품질의 3D 자산 생성을 달성합니다.
NVIDIA의 최신 Edify3D 기술은 3D 자산 생성 분야에서 획기적인 발전을 이루었습니다. 이 혁신적인 기술은 단 2분 만에 텍스트 설명이나 참조 이미지를 기반으로 완전한 UV 맵, 4K 텍스처 및 PBR 자료를 포함하는 고품질 3D 모델을 생성하여 게임 디자인, 영화 및 TV 제작, 확장 현실 솔루션과 같은 산업에 혁명을 일으킬 수 있습니다.
Edify3D는 다시점 확산 모델과 Transformer 기반 재구성 기술을 결합한 고유한 기술 아키텍처를 채택합니다. 핵심 파이프라인에는 세 가지 주요 단계가 포함됩니다.
다중 뷰 확산 모델은 입력을 기반으로 여러 뷰에서 RGB 이미지를 생성합니다.
멀티뷰 ControlNet은 해당 표면 법선을 합성합니다.
재구성된 모델은 이 정보를 등가곡면 추출 및 메쉬 후처리를 통해 최종 형상을 생성하는 신경 3D 표현에 통합합니다.
실제 응용 분야에서 Edify3D는 뛰어난 성능을 보여줍니다. 정밀한 메쉬 구조로 3D 모델을 생성할 뿐만 아니라 고해상도 텍스처와 재료 맵의 무결성을 보장합니다. 이 시스템은 배낭부터 축음기, 로봇 팔에 이르기까지 다양한 3D 자산 생성을 지원하며, 생성된 모델에는 쉬운 사후 편집 및 렌더링을 위한 적응형 사변형 메시 토폴로지가 있습니다.
Edify3D를 사용하여 복잡한 3D 장면을 생성할 수도 있다는 점은 특히 언급할 가치가 있습니다. LLM(대형 언어 모델)과 결합하여 시스템은 텍스트 프롬프트를 기반으로 장면 레이아웃, 개체 위치 및 크기를 정의하여 일관되고 사실적인 3D 장면 조합을 생성할 수 있습니다. 이 기능은 아트 디자인, 3D 모델링, AI 시뮬레이션과 같은 애플리케이션에 대한 강력한 지원을 제공합니다.
기술 확장성 측면에서 Edify3D는 탁월합니다. 훈련 보기 수가 증가함에 따라 모델에서 생성된 이미지의 품질과 일관성이 계속 향상됩니다. 재구성된 모델의 성능도 입력 뷰 수가 증가할수록 향상되며, 3면 토큰 크기는 컴퓨팅 리소스에 따라 유연하게 조정할 수 있습니다.
이 기술의 출시는 3D 콘텐츠 제작의 새로운 시대를 열며 관련 산업에 전례 없는 효율성 향상과 제작 가능성을 제공합니다.
자세한 소개: https://research.nvidia.com/labs/dir/edify-3d/
Edify3D의 등장은 3D 모델링 분야에서 새로운 발전의 물결을 예고하며, 효율적이고 편리한 기능은 모든 계층의 생산성을 크게 향상시킬 것입니다. 더 자세한 내용은 공식 링크를 방문하시면 더 자세히 보실 수 있습니다.