Alibaba는 단일 문자 및 다중 문자 이미지의 개인화된 처리를 실현하고 이미지 생성을 위한 스타일 참조 및 자유 텍스트 설명을 지원하는 새로운 AI 인물 이미지 처리 프레임워크인 UniPortrait를 출시했습니다. UniPortrait는 2단계 훈련 방식을 사용하여 실제와 같은 얼굴 특징을 높은 수준으로 유지하는 동시에 다양한 얼굴 편집 기능을 지원하여 이미지 생성의 품질과 효율성을 크게 향상시킵니다. 효율적인 사용자 정의 기능과 기존 생성 제어 도구와의 호환성은 사용자에게 전례 없는 이미지 개인화 사용자 정의 경험을 제공합니다. UniPortrait의 출현은 의심할 여지 없이 인물 이미지 처리 기술을 새로운 차원으로 끌어올리고 향후 다양한 응용 시나리오에 더 많은 가능성을 가져다 줄 것입니다.
이 프레임워크는 단일 ID의 이미지를 처리할 수 있을 뿐만 아니라 다중 역할 시나리오에서 고품질 개인화를 가능하게 합니다. UniPortrait는 얼굴 특징에서 높은 수준의 사실성을 유지하는 기능을 갖추고 있으며 광범위한 얼굴 편집 기능을 지원하므로 사용자는 자유 형식 텍스트 설명을 사용하여 고정 레이아웃 없이도 원하는 이미지를 생성할 수 있습니다.
다중 역할 일관성
훈련 과정에서 UniPortrait는 신중하게 설계된 2단계 훈련 프로그램을 사용합니다. 첫 번째 단계는 단일 ID의 훈련에 초점을 맞추고 두 번째 단계는 여러 ID를 미세 조정하는 것입니다. 이 훈련 방법을 통해 UniPortrait는 단일 및 다중 ID 사용자 정의 성능 모두에서 기존 방법을 능가합니다. 실험 결과도 확장성이 좋고 일반적으로 기존 생성 제어 도구와 호환되는 것으로 나타났습니다.
UniPortrait의 출시는 특히 자유 형식 프롬프트 및 다양한 레이아웃 생성 측면에서 인물 이미지의 개인화에 대한 새로운 가능성을 제공합니다. 연구팀은 단일 및 다중 ID 개인화의 여러 예를 시연하여 실제 적용을 위한 이 프레임워크의 큰 잠재력을 보여주었습니다. 즉, UniPortrait는 이미지 생성 품질을 향상시킬 뿐만 아니라 미래의 다양한 응용 시나리오를 위한 길을 열어줍니다.
제품 프로젝트 입구: https://top.aibase.com/tool/uniportrait
체험판 입장: https://huggingface.co/spaces/Junjie96/UniPortrait
가장 밝은 부분:
Portrait는 고품질 얼굴 특징 보존 기능을 갖춘 단일 및 다중 신원 이미지 개인화에 초점을 맞춘 새로운 프레임워크입니다.
✍️ 프레임워크는 ID 임베딩 모듈과 ID 라우팅 모듈로 구성되어 있으며, 2단계 트레이닝 방식을 통해 효율적인 커스터마이징이 가능합니다.
UniPortrait는 자유 텍스트 설명과 다양한 레이아웃 생성을 지원하여 인물 개인화를 위한 풍부한 가능성을 제공합니다.
전체적으로 UniPortrait는 강력한 기능과 편리한 조작을 통해 사용자에게 새로운 이미지 맞춤형 사용자 정의 경험을 제공하며 향후 개발 가능성이 크며 더 많은 분야에 적용할 수 있기를 기대합니다.