Downcodes小编报道:字节跳动最新推出的肖像动画技术X-Portrait2,以其超低成本和高效的动画生成能力,引发广泛关注。该技术只需静态肖像图像和表现驱动视频,即可生成逼真、富有表现力的动画视频,显著简化了传统动画制作流程。X-Portrait2的核心在于其先进的表情编码器模型,它能够精准捕捉并迁移微小表情,即使是撅嘴、吐舌头等复杂表情也能完美呈现,并保持高情感保真度。这项技术有望在动画电影、虚拟代理等领域带来革命性变革。
该技术的核心在于其先进的表情编码器模型,该模型经过大规模数据集的训练,能够隐式编码输入中的微小表情。结合强大的生成扩散模型,X-Portrait2可以生成流畅且极具表现力的视频,传输演员细微的面部表情,甚至包括撅嘴、吐舌头、鼓起脸颊和皱眉等挑战性表情。同时,生成的视频在情感表现上也保持高保真度。
在训练表情编码器时,开发团队确保外观和动作的强分离,使编码器专注于视频中与表情相关的信息。这种设计使得模型能够实现跨风格和跨领域的表情迁移,适用于现实故事讲述、角色动画、虚拟代理和视觉效果等多种场景。
与现有的最先进方法如 X-Portrait 和 Runway Act-One 相比,X-Portrait2在快速头部动作、微小表情变化和个人情感传递方面展现出更高的准确性,这些方面对于高质量的动画内容创作至关重要,例如动画和电影制作中的动画内容。
地址:https://byteaigc.github.io/X-Portrait2/
X-Portrait2凭借其高效、高保真度的动画生成能力,有望成为动画制作领域的一项重要技术突破,为创作者提供更便捷、更强大的工具。期待未来X-Portrait2在更多领域得到应用,为我们带来更精彩的动画作品。