字节跳动最新推出的肖像动画技术X-Portrait2，以其超低成本和高效的优势，为动画制作领域带来了一场革新。该技术无需复杂的动作捕捉，只需静态肖像和表现驱动视频，即可生成栩栩如生的动画视频，极大简化了动画制作流程。其核心在于先进的表情编码器模型，该模型能够精准捕捉并迁移细微的表情变化，即使是撅嘴、吐舌等复杂表情也能完美呈现，保证了动画的高保真度和表现力。
近日，字节跳动推出一款最新肖像动画技术X-Portrait2，旨在以超低成本和高效的方式创造富有表现力和逼真的角色动画。用户只需提供静态肖像图像和表现驱动视频，X-Portrait2即可通过将视频中的表情转移至肖像中生成动画视频，从而简化了传统动作捕捉和角色动画的复杂流程。
该技术的核心在于其先进的表情编码器模型，该模型经过大规模数据集的训练，能够隐式编码输入中的微小表情。结合强大的生成扩散模型，X-Portrait2可以生成流畅且极具表现力的视频，传输演员细微的面部表情，甚至包括撅嘴、吐舌头、鼓起脸颊和皱眉等挑战性表情。同时，生成的视频在情感表现上也保持高保真度。
在训练表情编码器时，开发团队确保外观和动作的强分离，使编码器专注于视频中与表情相关的信息。这种设计使得模型能够实现跨风格和跨领域的表情迁移，适用于现实故事讲述、角色动画、虚拟代理和视觉效果等多种场景。
与现有的最先进方法如 X-Portrait 和 Runway Act-One 相比，X-Portrait2在快速头部动作、微小表情变化和个人情感传递方面展现出更高的准确性，这些方面对于高质量的动画内容创作至关重要，例如动画和电影制作中的动画内容。
地址：https://byteaigc.github.io/X-Portrait2/
X-Portrait2技术的出现，标志着肖像动画技术的又一次飞跃，其高效、低成本和高保真度的特点将为动画制作行业带来巨大的变革，并有望在影视、游戏等领域得到广泛应用。 更多信息请访问项目地址。