เมื่อเร็วๆ นี้ Meta Corporation ได้เปิดตัวเทคโนโลยีโมเดล 3 มิติการสร้างข้อความใหม่ที่เรียกว่า Meta3D Gen (3DGen) ซึ่งสามารถสร้างโมเดล 3 มิติคุณภาพสูงได้อย่างรวดเร็วและมีประสิทธิภาพด้วยพื้นผิวและวัสดุที่สมจริง เทคโนโลยีที่ก้าวล้ำนี้รวมองค์ประกอบหลักสองประการของ Meta3D AssetGen และ Meta3D TextureGen เข้าด้วยกัน เพื่อปรับปรุงประสิทธิภาพและคุณภาพของการสร้างแบบจำลอง 3 มิติอย่างมีนัยสำคัญ และนำประสบการณ์ที่ไม่เคยมีมาก่อนมาสู่ผู้ใช้ 3DGen เหนือกว่าโซลูชั่นที่มีอยู่ในด้านความเร็วและคุณภาพ นำความเป็นไปได้ใหม่ๆ มาสู่ด้านต่างๆ เช่น การพัฒนาเกม ความเป็นจริงเสมือน และ Metaverse
เมื่อเร็วๆ นี้ นักวิจัยได้เปิดตัวเทคโนโลยีโมเดล 3 มิติที่สร้างข้อความอย่างรวดเร็วใหม่ที่เรียกว่า Meta3D Gen (3D Gen) 3D Gen สร้างโมเดล 3 มิติด้วยวิธีที่มีประสิทธิภาพด้วยพื้นผิวและวัสดุคุณภาพสูง มอบประสบการณ์ใหม่ให้กับผู้ใช้
ระบบใหม่นี้รวมสององค์ประกอบหลัก: Meta 3D AssetGen สำหรับการสร้าง 3D meshes และ Meta 3D TextureGen สำหรับการสร้างพื้นผิว เทคโนโลยีเหล่านี้ทำงานร่วมกันเพื่อสร้างเนื้อหา 3 มิติที่มีพื้นผิวที่มีความละเอียดสูงและวัสดุการเรนเดอร์ตามทางกายภาพ (PBR) จากข้อมูลของ Meta กระบวนการนี้เร็วกว่าโซลูชันที่มีอยู่สามถึงสิบเท่า
Meta3D AssetGen
Meta3D AssetGen (AssetGen) ถือเป็นความก้าวหน้าครั้งสำคัญในด้านการสร้างข้อความ 3 มิติ ซึ่งสามารถสร้างเนื้อหา 3 มิติคุณภาพสูงได้ภายในเวลาไม่ถึง 1 นาที AssetGen สร้างวัสดุการเรนเดอร์ตามทางกายภาพ (PBR) เพื่อให้ได้ความสามารถในการสร้างข้อความเป็น 3D และข้อความเป็นพื้นผิวที่มีประสิทธิภาพพร้อมเอฟเฟกต์แสงจริง
ในขั้นแรก AssetGen จะสร้างมุมมองต่างๆ ของวัตถุ รวมถึงข้อมูลลักษณะที่ปรากฏสำหรับช่องเงาและภาพสะท้อน จากนั้นสร้างสี ความเป็นโลหะ และความหยาบขึ้นใหม่ในพื้นที่ 3 มิติ โดยใช้การสูญเสียแรเงาที่เลื่อนออกไปเพื่อการควบคุมดูแลที่มีประสิทธิภาพ นอกจากนี้ยังใช้ฟังก์ชันระยะทางที่เซ็นชื่อเพื่อแสดงรูปร่าง 3 มิติได้อย่างน่าเชื่อถือมากขึ้น และแนะนำการสูญเสียที่สอดคล้องกันสำหรับการควบคุมรูปร่างโดยตรง เพื่อปรับปรุงประสิทธิภาพของหน่วยความจำ วิธีนี้ใช้เคอร์เนลแบบ fused convolution หลังจากแยกตาข่ายออกแล้ว หม้อแปลงไฟฟ้าที่ปรับแต่งพื้นผิวในพื้นที่ UV จะช่วยเพิ่มความชัดเจนและรายละเอียดของพื้นผิวได้อย่างมาก
AssetGen ประสบความสำเร็จในการปรับปรุง Chamfer Distance 17% และ LPIPS ที่ดีขึ้น 40% เมื่อเทียบกับวิธีการแข่งขันที่ดีที่สุด ขณะเดียวกัน ในการทดสอบความชอบของมนุษย์กับคู่แข่งที่ดีที่สุดในอุตสาหกรรมด้วยความเร็วเท่ากัน ก็ได้รับความนิยมถึง 72%
Meta3D TextureGen
นักวิจัยยังได้แนะนำ Meta3D TextureGen ซึ่งเป็นแนวทางไปข้างหน้าใหม่ซึ่งประกอบด้วยเครือข่ายลำดับสองเครือข่ายที่ออกแบบมาเพื่อสร้างพื้นผิวคุณภาพสูงและสอดคล้องกันทั่วโลกสำหรับเรขาคณิตที่มีความซับซ้อนตามอำเภอใจภายในเวลาไม่ถึง 20 วินาที
วิธีการนี้ให้ผลลัพธ์ที่ล้ำสมัยในด้านคุณภาพและความเร็วโดยการรวมโมเดลรูปภาพที่สร้างข้อความเข้ากับเงื่อนไขความหมาย 3 มิติในพื้นที่ 2 มิติ และรวมเข้าด้วยกันเป็นแผนที่พื้นผิว UV ที่สมบูรณ์และมีความละเอียดสูง
นักวิจัยยังได้แนะนำเครือข่ายการปรับปรุงพื้นผิวที่สามารถขยายขนาดพื้นผิวทุกขนาดเพื่อสร้างพื้นผิวที่ความละเอียด 4K พิกเซล
บล็อกอย่างเป็นทางการ: https://ai.meta.com/research/publications/meta-3d-gen/
ไฮไลท์:
-ระบบ Meta 3D Gen สร้างเนื้อหา 3D คุณภาพสูงในเวลาไม่ถึงนาที
- Meta3D Gen ผสานรวมเทคโนโลยีหลักทั้งสองของ Meta3D AssetGen และ Meta3DTextureGen
- AssetGen รองรับการสร้างวัสดุการเรนเดอร์ตามทางกายภาพพร้อมเอฟเฟกต์การสะท้อนแสงที่สมจริง
- Meta3D TextureGen เป็นวิธีการสร้างพื้นผิวคุณภาพสูงสำหรับรูปทรงเรขาคณิตที่ซับซ้อนได้อย่างรวดเร็ว
การเกิดขึ้นของ Meta3D Gen ถือเป็นความก้าวหน้าครั้งสำคัญในเทคโนโลยีการสร้างข้อความ 3 มิติ ประสิทธิภาพ คุณภาพสูง และความสะดวกในการใช้งาน จะช่วยส่งเสริมการพัฒนาด้านการสร้างเนื้อหา 3 มิติอย่างมาก และนำความเป็นไปได้ที่ไร้ขีดจำกัดมาสู่ทุกสาขาอาชีพ ในอนาคต เราสามารถตั้งตารอแอปพลิเคชันและการเพิ่มประสิทธิภาพ Meta3D Gen ต่อไปในสาขาอื่นๆ ต่อไป