NVIDIA는 단 2분 만에 고품질 3D 모델을 생성하는 놀라운 Edify3D 기술을 출시했습니다. 이 획기적인 기술은 텍스트 설명이나 참조 이미지를 사용하여 완전한 UV 맵, 4K 텍스처 및 PBR 자료가 포함된 3D 자산을 생성하여 게임 개발, 영화 및 TV 제작, 확장 현실 분야에 혁신적인 변화를 가져옵니다. 다운코드 편집자는 이 기술의 세부 사항과 이 기술이 3D 콘텐츠 제작의 미래를 어떻게 변화시킬 것인지에 대해 안내할 것입니다.
NVIDIA의 최신 Edify3D 기술은 3D 자산 생성 분야에서 획기적인 발전을 이루었습니다. 이 혁신적인 기술은 단 2분 만에 텍스트 설명이나 참조 이미지를 기반으로 완전한 UV 맵, 4K 텍스처 및 PBR 자료를 포함하는 고품질 3D 모델을 생성하여 게임 디자인, 영화 및 TV 제작, 확장 현실 솔루션과 같은 산업에 혁명을 일으킬 수 있습니다.
Edify3D는 다시점 확산 모델과 Transformer 기반 재구성 기술을 결합한 고유한 기술 아키텍처를 채택합니다. 핵심 파이프라인에는 세 가지 주요 단계가 포함됩니다.
다중 뷰 확산 모델은 입력을 기반으로 여러 뷰에서 RGB 이미지를 생성합니다.
다중 뷰 ControlNet은 해당 표면 법선을 합성합니다.
재구성된 모델은 이 정보를 등가곡면 추출 및 메쉬 후처리를 통해 최종 형상을 생성하는 신경 3D 표현에 통합합니다.
실제 응용 분야에서 Edify3D는 뛰어난 성능을 보여줍니다. 정밀한 메쉬 구조로 3D 모델을 생성할 뿐만 아니라 고해상도 텍스처와 재료 맵의 무결성을 보장합니다. 이 시스템은 배낭부터 축음기, 로봇 팔에 이르기까지 다양한 3D 자산 생성을 지원하며, 생성된 모델에는 쉬운 사후 편집 및 렌더링을 위한 적응형 사변형 메시 토폴로지가 있습니다.
특히 Edify3D를 사용하여 복잡한 3D 장면을 생성할 수 있다는 점은 언급할 가치가 있습니다. LLM(대형 언어 모델)과 결합하여 시스템은 텍스트 프롬프트를 기반으로 장면 레이아웃, 개체 위치 및 크기를 정의하여 일관되고 사실적인 3D 장면 조합을 생성할 수 있습니다. 이 기능은 아트 디자인, 3D 모델링, AI 시뮬레이션과 같은 애플리케이션에 대한 강력한 지원을 제공합니다.
기술 확장성 측면에서 Edify3D는 탁월합니다. 훈련 보기 수가 증가함에 따라 모델에서 생성된 이미지의 품질과 일관성이 계속 향상됩니다. 재구성된 모델의 성능도 입력 뷰 수가 증가할수록 향상되며, 3면 토큰 크기는 컴퓨팅 리소스에 따라 유연하게 조정할 수 있습니다.
이 기술의 출시는 3D 콘텐츠 제작의 새로운 시대를 열며 관련 산업에 전례 없는 효율성 향상과 제작 가능성을 제공합니다.
자세한 소개: https://research.nvidia.com/labs/dir/edify-3d/
전체적으로 Edify3D 기술의 출현은 의심할 여지 없이 3D 콘텐츠 제작 분야에 중대한 영향을 미칠 것입니다. 효율성, 높은 품질 및 사용 편의성 덕분에 향후 3D 모델링 및 장면 디자인을 위한 강력한 도구가 됩니다. 우리는 이 기술이 더 많은 분야에서 사용되고 더 놀라운 시각적 경험을 제공할 수 있기를 기대합니다!