เทคโนโลยี Edify3D ที่เปิดตัวโดย NVIDIA สามารถสร้างโมเดล 3 มิติคุณภาพสูง รวมถึงแผนที่ UV ที่สมบูรณ์ พื้นผิว 4K และวัสดุ PBR ได้ในเวลาเพียงสองนาที ไม่ต้องสงสัยเลยว่านี่คือตัวเปลี่ยนเกมสำหรับสาขาการออกแบบเกม การผลิตภาพยนตร์และโทรทัศน์ และการขยายขอบเขตความเป็นจริง การปฎิวัติ. โดยอิงตามคำอธิบายข้อความหรือรูปภาพอ้างอิง และผ่านสถาปัตยกรรมทางเทคนิคที่เป็นเอกลักษณ์ โดยผสมผสานโมเดลการแพร่กระจายหลายมุมมองเข้ากับเทคโนโลยีการสร้างใหม่โดยใช้ Transformer เพื่อให้ได้การสร้างสินทรัพย์ 3 มิติที่มีประสิทธิภาพและมีคุณภาพสูง
เทคโนโลยี Edify3D ล่าสุดของ NVIDIA ได้สร้างความก้าวหน้าครั้งใหญ่ในด้านการสร้างสินทรัพย์ 3 มิติ เทคโนโลยีที่เป็นนวัตกรรมนี้สามารถสร้างโมเดล 3 มิติคุณภาพสูงที่มีแผนที่ UV ที่สมบูรณ์ พื้นผิว 4K และวัสดุ PBR ตามคำอธิบายข้อความหรือรูปภาพอ้างอิงได้ในเวลาเพียงสองนาที ปฏิวัติอุตสาหกรรมต่างๆ เช่น การออกแบบเกม การผลิตภาพยนตร์และโทรทัศน์ และโซลูชันการขยายความเป็นจริง
Edify3D ใช้สถาปัตยกรรมทางเทคนิคที่เป็นเอกลักษณ์ซึ่งผสมผสานโมเดลการแพร่กระจายหลายมุมมองเข้ากับเทคโนโลยีการสร้างใหม่โดยใช้ Transformer ไปป์ไลน์หลักประกอบด้วยสามขั้นตอนสำคัญ:
โมเดลการแพร่กระจายหลายมุมมองจะสร้างภาพ RGB จากหลายมุมมองตามอินพุต
Multi-view ControlNet สังเคราะห์ค่าปกติของพื้นผิวที่สอดคล้องกัน
โมเดลที่สร้างขึ้นใหม่จะรวมข้อมูลนี้เข้ากับการนำเสนอแบบ 3 มิติแบบนิวรัลที่สร้างเรขาคณิตขั้นสุดท้ายผ่านการสกัดไอโซเซอร์เฟซและการประมวลผลหลังการประมวลผลแบบตาข่าย
ในการใช้งานจริง Edify3D แสดงให้เห็นประสิทธิภาพที่ยอดเยี่ยม ไม่เพียงสร้างโมเดล 3 มิติที่มีโครงสร้างตาข่ายที่แม่นยำ แต่ยังรับประกันพื้นผิวที่มีความละเอียดสูงและความสมบูรณ์ของแผนผังวัสดุอีกด้วย ระบบรองรับการสร้างสินทรัพย์ 3 มิติที่หลากหลายตั้งแต่กระเป๋าเป้ เครื่องเล่นแผ่นเสียง ไปจนถึงแขนหุ่นยนต์ และโมเดลที่สร้างขึ้นมีโทโพโลยีตาข่ายรูปสี่เหลี่ยมขนมเปียกปูนที่ปรับเปลี่ยนได้เพื่อให้ง่ายต่อการแก้ไขและเรนเดอร์ภายหลัง
เป็นเรื่องที่ควรกล่าวถึงเป็นอย่างยิ่งว่า Edify3D สามารถใช้เพื่อสร้างฉาก 3D ที่ซับซ้อนได้ ด้วยการรวมเข้ากับโมเดลภาษาขนาดใหญ่ (LLM) ระบบจึงสามารถกำหนดเค้าโครงฉาก ตำแหน่งวัตถุ และขนาดตามข้อความแจ้ง ทำให้เกิดการผสมผสานฉาก 3 มิติที่สอดคล้องและสมจริง คุณสมบัตินี้ให้การสนับสนุนที่มีประสิทธิภาพสำหรับแอปพลิเคชันต่างๆ เช่น การออกแบบงานศิลปะ การสร้างแบบจำลอง 3 มิติ และการจำลอง AI
เมื่อพูดถึงความสามารถในการปรับขนาดของเทคโนโลยี Edify3D ทำได้ดีเยี่ยม เมื่อจำนวนการดูการฝึกเพิ่มขึ้น คุณภาพและความสม่ำเสมอของรูปภาพที่สร้างโดยโมเดลจะปรับปรุงอย่างต่อเนื่อง ประสิทธิภาพของแบบจำลองที่สร้างขึ้นใหม่ยังได้รับการปรับปรุงเมื่อจำนวนมุมมองอินพุตเพิ่มขึ้น ในขณะที่ขนาดโทเค็นสามระนาบสามารถปรับได้อย่างยืดหยุ่นตามทรัพยากรการประมวลผล
การเปิดตัวเทคโนโลยีนี้นับเป็นยุคใหม่ในการสร้างเนื้อหา 3 มิติ โดยนำการปรับปรุงประสิทธิภาพและความเป็นไปได้ในการสร้างสรรค์มาสู่อุตสาหกรรมที่เกี่ยวข้องอย่างที่ไม่เคยมีมาก่อน
บทนำโดยละเอียด: https://research.nvidia.com/labs/dir/edify-3d/
การเกิดขึ้นของ Edify3D ถือเป็นการประกาศคลื่นลูกใหม่ของการพัฒนาในด้านการสร้างแบบจำลอง 3 มิติ ฟีเจอร์ที่มีประสิทธิภาพและความสะดวกสบายของมันจะนำมาซึ่งการปรับปรุงประสิทธิภาพการทำงานครั้งใหญ่ให้กับทุกสาขาอาชีพอย่างแน่นอน สำหรับข้อมูลเพิ่มเติม โปรดไปที่ลิงก์อย่างเป็นทางการเพื่อดูรายละเอียดเพิ่มเติม