ทุกวันนี้ ในขณะที่โลกเสมือนจริงกำลังพัฒนาอย่างเข้มข้นมากขึ้น ความต้องการภาพเสมือนจริง 3 มิติส่วนบุคคลก็เพิ่มขึ้นทุกวัน บรรณาธิการของ Downcodes ต้องการแนะนำเทคโนโลยีที่ก้าวล้ำที่น่าตื่นเต้นในวันนี้: ทีมวิจัยจากมหาวิทยาลัยฮ่องกงและสถาบันอื่นๆ ได้เปิดตัวกรอบการทำงานที่เป็นนวัตกรรมที่เรียกว่า DreamWaltz-G ซึ่งสามารถสร้างอวาตาร์ 3 มิติที่มีชีวิตชีวาและเคลื่อนไหวได้ตามคำอธิบายข้อความ โดยนำ การเปลี่ยนแปลงเชิงปฏิวัติในด้านการสร้างเนื้อหาดิจิทัล เทคโนโลยีนี้ไม่เพียงแต่ปรับปรุงคุณภาพและประสิทธิภาพของการสร้างอวาตาร์เท่านั้น แต่ยังขยายความเป็นไปได้ในสถานการณ์การใช้งานต่างๆ สร้างประสบการณ์การสร้างสรรค์ดิจิทัลที่ไม่เคยมีมาก่อนสำหรับผู้ใช้
ในยุคดิจิทัล ภาพเสมือนส่วนบุคคลกำลังดึงดูดความสนใจมากขึ้นเรื่อยๆ เมื่อเร็วๆ นี้ ทีมวิจัยจากมหาวิทยาลัยฮ่องกงและสถาบันอื่นๆ ได้เปิดตัวกรอบงานนวัตกรรมที่เรียกว่า DreamWaltz-G ซึ่งสามารถสร้างอวตารแบบเคลื่อนไหวได้ 3 มิติที่สดใสตามคำอธิบายข้อความ ซึ่งขยายความเป็นไปได้อย่างมากสำหรับการสร้างเนื้อหาดิจิทัล
เทคโนโลยีหลักของ DreamWaltz-G ได้แก่ "การกลั่นคะแนนตามหลักโครงกระดูก" และ "การแสดงอวาตาร์ 3D Gaussian แบบไฮบริด" ด้วยการรวมการควบคุมโครงร่างของเทมเพลตมนุษย์ 3 มิติเข้ากับโมเดลการแพร่กระจาย 2 มิติ นักวิจัยจึงสามารถปรับปรุงความสอดคล้องของอวตารที่สร้างขึ้น โดยเฉพาะอย่างยิ่งในแง่ของมุมมองและท่าทางของมนุษย์ วิธีการนี้ช่วยลดปัญหาทั่วไปในระหว่างกระบวนการสร้าง เช่น รูปประจำตัวที่เบลอ แขนขาส่วนเกิน หรือการบิดเบี้ยวของใบหน้าได้อย่างมีประสิทธิภาพ
การแสดงอวตาร 3D Gaussian แบบไฮบริดที่นำมาใช้โดยเฟรมเวิร์กนี้ ช่วยให้สามารถเรนเดอร์แบบเรียลไทม์และการเพิ่มประสิทธิภาพการกลั่นคะแนนที่เสถียรโดยการรวมฟิลด์โดยนัยของระบบประสาทและเมช 3D ที่กำหนดพารามิเตอร์ การออกแบบนี้ไม่เพียงแต่ปรับปรุงคุณภาพภาพของอวาตาร์เท่านั้น แต่ยังช่วยเพิ่มความหมายของแอนิเมชั่นอีกด้วย
ด้วยชุดการทดลอง DreamWaltz-G แสดงให้เห็นถึงผลลัพธ์ที่เหนือกว่าในการสร้างและสร้างภาพเคลื่อนไหวอวตาร 3 มิติ ซึ่งเหนือกว่าวิธีการที่มีอยู่ ไม่ว่าจะใช้สำหรับการจำลองวิดีโอของมนุษย์หรือการสร้างฉากที่มีหลายหัวข้อ กรอบงานนี้แสดงโอกาสในการนำไปใช้งานที่หลากหลาย
ในแง่ของการใช้งานจริง DreamWaltz-G ช่วยให้สามารถควบคุมและแก้ไขรูปร่างได้ ผู้ใช้สามารถแก้ไขเทมเพลต SMPL-X ในระหว่างกระบวนการฝึกอบรม หรือแก้ไขรูปร่างโดยการปรับ 3D Gaussian ในระหว่างขั้นตอนการอนุมาน ในเวลาเดียวกัน วิธีนี้ยังสนับสนุนการใช้การประมาณท่าทางมนุษย์แบบ 3 มิติและเทคโนโลยีการซ่อมแซมวิดีโอ เพื่อรวมอวตาร 3 มิติที่สร้างขึ้นเข้ากับวิดีโอ 2 มิติได้อย่างง่ายดาย เพื่อให้ได้เอฟเฟกต์การจำลองที่เป็นธรรมชาติ
ไม่ว่าจะเป็นการสร้างภาพดิจิทัลส่วนบุคคลหรือการแสดงภาพเคลื่อนไหวที่ซับซ้อนในสภาพแวดล้อมเสมือนจริง DreamWaltz-G มอบความสะดวกสบายอย่างที่ไม่เคยมีมาก่อนให้กับผู้ใช้ และเปิดศักราชใหม่ของการสร้างสรรค์ดิจิทัล
ไฮไลท์:
1. ? DreamWaltz-G เป็นเฟรมเวิร์กนวัตกรรมที่สร้างอวาตาร์แบบเคลื่อนไหวได้ 3 มิติที่สดใสตามคำอธิบายข้อความ
2. เฟรมเวิร์กนี้ผสมผสานการกลั่นคะแนนตามแนวทางกระดูกและการแทนค่า 3D Gaussian แบบไฮบริด เพื่อปรับปรุงความสอดคล้องและการแสดงออกของแอนิเมชันของการสร้างอวาตาร์
3. ? DreamWaltz-G รองรับการควบคุมรูปร่าง เล่นวิดีโอซ้ำ และการสร้างฉากแบบหลายตัวแทน ขยายความเป็นไปได้ของการสร้างเนื้อหาดิจิทัล
การเกิดขึ้นของ DreamWaltz-G จะส่งผลกระทบอย่างลึกซึ้งต่อการสร้างเนื้อหาดิจิทัลอย่างไม่ต้องสงสัย และเพิ่มความมีชีวิตชีวาให้กับโลกเสมือนจริง ฟังก์ชันอันทรงพลังและการดำเนินงานที่สะดวกสบายจะดึงดูดผู้สร้างให้ลงทุนมากขึ้นอย่างแน่นอน และร่วมกันสร้างอนาคตดิจิทัลที่น่าตื่นเต้นยิ่งขึ้น เราหวังว่าจะมีการพัฒนาและการประยุกต์ใช้ DreamWaltz-G เพิ่มเติมในอนาคต ซึ่งจะทำให้เราประหลาดใจมากขึ้น