アリババは、新しい AI ポートレート画像処理フレームワーク UniPortrait を発表しました。UniPortrait は、単一文字および複数文字の画像のパーソナライズされた処理を実現し、画像を生成するためのスタイル参照と自由なテキスト記述をサポートします。 UniPortrait は、2 段階のトレーニング スキームを使用して、高度に実物そっくりの顔の特徴を維持しながら、幅広い顔編集機能をサポートし、画像生成の品質と効率を大幅に向上させます。その効率的なカスタマイズ機能と既存の生成制御ツールとの互換性は、ユーザーに前例のないイメージのパーソナライズ カスタマイズ エクスペリエンスを提供します。 UniPortrait の登場により、ポートレート画像処理技術は間違いなく新たな高みに押し上げられ、将来的にはさまざまなアプリケーション シナリオにさらなる可能性がもたらされるでしょう。
このフレームワークは、単一のアイデンティティの画像を処理できるだけでなく、複数の役割のシナリオで高品質のパーソナライゼーションを可能にします。 UniPortrait は、顔の特徴の高度なリアリズムを維持する機能を備えており、幅広い顔編集機能をサポートしているため、ユーザーは自由形式のテキスト記述を使用して、固定レイアウトを必要とせずに必要な画像を生成することもできます。
複数の役割の一貫性
トレーニング プロセス中、UniPortrait は慎重に設計された 2 段階のトレーニング プログラムを使用します。最初のフェーズでは単一のアイデンティティのトレーニングに焦点を当て、第 2 フェーズでは複数のアイデンティティを微調整します。このトレーニング方法により、UniPortrait は単一および複数の ID カスタマイズのパフォーマンスの両方で既存の方法を上回ります。また、実験結果では、UniPortrait が優れたスケーラビリティを備え、既存の生成制御ツールと一般的に互換性があることも示しています。
UniPortrait の発表により、特に自由形式のプロンプトと多様なレイアウト生成の点で、ポートレート画像のパーソナライズに新たな可能性がもたらされます。研究チームは、単一および複数の ID パーソナライゼーションの複数の例を実証し、このフレームワークが実用化できる大きな可能性を示しました。つまり、UniPortrait は画像生成の品質を向上させるだけでなく、将来のさまざまなアプリケーション シナリオへの道を開きます。
製品プロジェクト入口：https://top.aibase.com/tool/uniportrait
トライアル入口：https://huggingface.co/spaces/Junjie96/UniPortrait
ハイライト:
Portrait は、高品質の顔の特徴を保持した単一および複数のアイデンティティ画像のパーソナライゼーションに焦点を当てた新しいフレームワークです。
✍️ フレームワークは ID 埋め込みモジュールと ID ルーティング モジュールで構成され、2 段階のトレーニング スキームを通じて効率的なカスタマイズを実現します。
UniPortrait はポートレートのパーソナライゼーションに豊富な可能性を提供し、自由なテキストの説明と多様なレイアウトの生成をサポートします。
全体として、UniPortrait は、強力な機能と便利な操作により、ユーザーに新しい画像パーソナライズ体験を提供し、今後の発展の可能性が大きく、より多くの分野での応用が期待されています。