เมื่อเร็วๆ นี้ ทีมวิจัยของมหาวิทยาลัยปักกิ่งและ Pengcheng Laboratory ได้เปิดตัว HoloDreamer ซึ่งเป็นเฟรมเวิร์กการสร้างฉาก 3 มิติใหม่ ซึ่งสามารถสร้างฉาก 3 มิติที่สมจริงและสมบูรณ์ตามคำอธิบายข้อความของผู้ใช้ ซึ่งนำนวัตกรรมมาสู่สาขาต่างๆ เช่น ความเป็นจริงเสมือนและเกม แกนหลักของกรอบงาน HoloDreamer อยู่ที่โมดูล "การสร้างภาพพาโนรามาสามมิติที่มีสไตล์" และ "การสร้างภาพพาโนรามาใหม่แบบสองขั้นตอนที่ได้รับการปรับปรุง" ซึ่งทำให้ได้การสร้างฉาก 3 มิติมุมมองเปอร์สเปคทีฟคุณภาพสูงและสม่ำเสมอผ่านเทคโนโลยีสเปรย์ 3D Gaussian บรรณาธิการของ Downcodes จะอธิบายรายละเอียดเกี่ยวกับเทคโนโลยีที่ก้าวล้ำนี้
เมื่อเร็วๆ นี้ ทีมวิจัยจากมหาวิทยาลัยปักกิ่งและห้องปฏิบัติการ Pengcheng ได้เปิดตัวเฟรมเวิร์กการสร้างฉาก 3 มิติใหม่ที่เรียกว่า HoloDreamer ซึ่งมีเป้าหมายเพื่อสร้างฉาก 3 มิติที่สมจริงและสมบูรณ์ผ่านคำอธิบายข้อความของผู้ใช้
เฟรมเวิร์กนี้ประกอบด้วยโมดูลหลักสองโมดูล: โมดูลแรกคือ "การสร้างภาพพาโนรามาสามมิติที่มีสไตล์" ซึ่งสามารถสร้างภาพพาโนรามาคุณภาพสูงตามที่ผู้ใช้แจ้ง โมดูลที่สองคือ "การสร้างภาพพาโนรามาแบบสองขั้นตอนที่ได้รับการปรับปรุง" ซึ่งใช้เทคโนโลยีสเปรย์เกาส์เซียน 3D อย่างรวดเร็ว พาโนรามาเพื่อให้แน่ใจว่าฉากที่ได้มีมุมมองที่สอดคล้องกัน
ด้วยการเตรียมกล้องสองประเภทในสถานการณ์ที่แตกต่างกัน ทีมวิจัยจึงสามารถควบคุมชุดภาพในขั้นตอนต่างๆ ของการเพิ่มประสิทธิภาพสเปรย์เกาส์เซียน 3D ได้ จึงเป็นการปรับฉากที่สร้างขึ้นใหม่ขั้นสุดท้ายให้เหมาะสมที่สุด
หลังจากการทดลองที่ครอบคลุม HoloDreamer เหนือกว่าผลการวิจัยก่อนหน้านี้ในแง่ของความสอดคล้องและความกลมกลืนของการมองเห็น รวมถึงคุณภาพการสร้างใหม่และการให้ความทนทาน เฟรมเวิร์กที่เป็นนวัตกรรมใหม่นี้คาดว่าจะมีบทบาทสำคัญในแอปพลิเคชันต่างๆ ในอนาคต และนำประสบการณ์ฉาก 3D ที่สมบูรณ์ยิ่งขึ้นมาให้
ไฮไลท์:
HoloDreamer เป็นเฟรมเวิร์กการสร้างฉาก 3 มิติใหม่ที่สร้างฉาก 3 มิติที่สมบูรณ์ผ่านคำอธิบายข้อความ
กรอบงานประกอบด้วยสองโมดูล: การสร้างภาพพาโนรามาที่มีสไตล์และการสร้างภาพพาโนรามาที่ได้รับการปรับปรุงใหม่ เพื่อให้มั่นใจในคุณภาพและความสม่ำเสมอของผลลัพธ์ที่สร้างขึ้น
HoloDreamer ทำงานได้ดีในการทดลอง ซึ่งเหนือกว่าวิธีสร้าง 3D ก่อนหน้านี้ และมอบโซลูชันใหม่สำหรับสาขาต่างๆ เช่น ความเป็นจริงเสมือนและเกม
ด้วยประสิทธิภาพและนวัตกรรมที่ยอดเยี่ยม HoloDreamer คาดว่าจะส่งเสริมการพัฒนาเทคโนโลยีการสร้างฉาก 3 มิติเพิ่มเติม และนำผู้ใช้สัมผัสประสบการณ์เสมือนจริงที่สมจริงและดื่มด่ำยิ่งขึ้น บรรณาธิการของ Downcodes รอคอยการใช้งานและความก้าวหน้าของ HoloDreamer ในสาขาอื่นๆ ในอนาคต!