เทคโนโลยีภาพเคลื่อนไหวภาพเคลื่อนไหวล่าสุดของ Bytedance X-Portrait2 ได้นำนวัตกรรมมาสู่สนามผลิตแอนิเมชั่นด้วยต้นทุนต่ำสุดและมีประสิทธิภาพสูง เทคโนโลยีนี้ไม่จำเป็นต้องมีการจับภาพการเคลื่อนไหวที่ซับซ้อนและมีเพียงภาพวาดแบบคงที่และวิดีโอที่ขับเคลื่อนด้วยประสิทธิภาพเท่านั้นที่สามารถสร้างขึ้นเพื่อสร้างวิดีโอภาพเคลื่อนไหวที่เหมือนจริงทำให้กระบวนการผลิตภาพเคลื่อนไหวง่ายขึ้นอย่างมาก แกนกลางของมันอยู่ในโมเดลตัวเข้ารหัสนิพจน์ขั้นสูงซึ่งสามารถจับภาพและโยกย้ายการเปลี่ยนแปลงการแสดงออกที่ละเอียดอ่อนได้อย่างแม่นยำและแม้แต่การแสดงออกที่ซับซ้อนเช่นการเย้ยหยันและการยื่นลิ้นสามารถนำเสนอได้อย่างสมบูรณ์
เมื่อเร็ว ๆ นี้ Bytedance ได้เปิดตัวเทคโนโลยีภาพเคลื่อนไหวล่าสุด X-Portrait2 โดยมีวัตถุประสงค์เพื่อสร้างภาพเคลื่อนไหวของตัวละครที่แสดงออกและสมจริงในราคาที่ต่ำเป็นพิเศษและมีประสิทธิภาพ ผู้ใช้เพียงแค่ต้องให้ภาพภาพบุคคลแบบคงที่และวิดีโอที่ขับเคลื่อนด้วยประสิทธิภาพและ X-Portrait2 สามารถสร้างวิดีโอภาพเคลื่อนไหวได้โดยการถ่ายโอนการแสดงออกในวิดีโอไปยังภาพบุคคลซึ่งทำให้กระบวนการที่ซับซ้อนของการจับภาพเคลื่อนไหวแบบดั้งเดิมและภาพเคลื่อนไหว
แกนกลางของเทคโนโลยีนี้อยู่ในโมเดล Emoji Encoder ขั้นสูงซึ่งได้รับการฝึกฝนในชุดข้อมูลขนาดใหญ่และสามารถเข้ารหัสนิพจน์เล็ก ๆ ในอินพุตได้โดยปริยาย เมื่อรวมกับรูปแบบการแพร่กระจายที่ทรงพลัง X-Portrait2 สามารถสร้างวิดีโอที่ราบรื่นและแสดงออกได้ซึ่งส่งการแสดงออกทางสีหน้าที่ลึกซึ้งของนักแสดงแม้กระทั่งการแสดงออกที่ท้าทายเช่นการเย้ยหยัน ในขณะเดียวกันวิดีโอที่สร้างขึ้นก็ยังคงรักษาความซื่อสัตย์ในประสิทธิภาพทางอารมณ์สูง
เมื่อฝึกอบรม Emoji Encoder ทีมพัฒนาจะช่วยให้มั่นใจได้ว่าการแยกตัวและการเคลื่อนไหวจะช่วยให้ผู้เข้ารหัสมุ่งเน้นไปที่ข้อมูลที่เกี่ยวข้องกับการแสดงออกในวิดีโอ การออกแบบนี้ช่วยให้แบบจำลองสามารถบรรลุการโยกย้ายการแสดงออกของการแสดงออกข้ามและข้ามโดเมนและเหมาะสำหรับฉากที่หลากหลายเช่นการเล่าเรื่องจริงภาพเคลื่อนไหวของตัวละครตัวแทนเสมือนจริงและเอฟเฟกต์ภาพ
เมื่อเทียบกับวิธีการที่ทันสมัยเช่น X-portrait และ Runway Act-One, X-Portrait2 แสดงความแม่นยำสูงขึ้นในการเคลื่อนไหวของหัวอย่างรวดเร็วการเปลี่ยนแปลงการแสดงออกเล็ก ๆ น้อย ๆ และการส่งผ่านอารมณ์ส่วนบุคคลสำหรับการสร้างเนื้อหาภาพเคลื่อนไหวคุณภาพสูงเป็นสิ่งสำคัญเช่น เป็นเนื้อหาแอนิเมชั่นในการผลิตภาพเคลื่อนไหวและภาพยนตร์
ที่อยู่: https://byteaigc.github.io/x-portrait2/
การเกิดขึ้นของเทคโนโลยี X-Portrait2 นับเป็นการก้าวกระโดดอีกครั้งในเทคโนโลยีภาพเคลื่อนไหวภาพบุคคล . สำหรับข้อมูลเพิ่มเติมกรุณาเยี่ยมชมที่อยู่โครงการ