字節跳動最新推出的肖像動畫技術X-Portrait2，以其超低成本和高效的優勢，為動畫製作領域帶來了一場革新。該技術無需複雜的動作捕捉，只需靜態肖像和表現驅動視頻，即可生成栩栩如生的動畫視頻，極大簡化了動畫製作流程。其核心在於先進的表情編碼器模型，該模型能夠精準捕捉並遷移細微的表情變化，即使是撅嘴、吐舌等複雜表情也能完美呈現，保證了動畫的高保真度和表現力。
近日，字節跳動推出一款最新肖像動畫技術X-Portrait2，旨在以超低成本和高效的方式創造富有表現力和逼真的角色動畫。用戶只需提供靜態肖像圖像和表現驅動視頻，X-Portrait2即可通過將視頻中的表情轉移至肖像中生成動畫視頻，從而簡化了傳統動作捕捉和角色動畫的複雜流程。
該技術的核心在於其先進的表情編碼器模型，該模型經過大規模數據集的訓練，能夠隱式編碼輸入中的微小表情。結合強大的生成擴散模型，X-Portrait2可以生成流暢且極具表現力的視頻，傳輸演員細微的面部表情，甚至包括撅嘴、吐舌頭、鼓起臉頰和皺眉等挑戰性表情。同時，生成的視頻在情感表現上也保持高保真度。
在訓練表情編碼器時，開發團隊確保外觀和動作的強分離，使編碼器專注於視頻中與表情相關的信息。這種設計使得模型能夠實現跨風格和跨領域的表情遷移，適用於現實故事講述、角色動畫、虛擬代理和視覺效果等多種場景。
與現有的最先進方法如X-Portrait 和Runway Act-One 相比，X-Portrait2在快速頭部動作、微小表情變化和個人情感傳遞方面展現出更高的準確性，這些方面對於高質量的動畫內容創作至關重要，例如動畫和電影製作中的動畫內容。
地址：https://byteaigc.github.io/X-Portrait2/
X-Portrait2技術的出現，標誌著肖像動畫技術的又一次飛躍，其高效、低成本和高保真度的特點將為動畫製作行業帶來巨大的變革，並有望在影視、遊戲等領域得到廣泛應用。 更多信息請訪問項目地址。