NVIDIA ได้เปิดตัวเทคโนโลยี Edify3D อันน่าทึ่งที่สร้างโมเดล 3D คุณภาพสูงในเวลาเพียงสองนาที เทคโนโลยีที่ก้าวล้ำนี้ใช้คำอธิบายข้อความหรือรูปภาพอ้างอิงเพื่อสร้างเนื้อหา 3 มิติที่มีแผนที่ UV ที่สมบูรณ์ พื้นผิว 4K และวัสดุ PBR นำการเปลี่ยนแปลงที่ปฏิวัติวงการในด้านการพัฒนาเกม การผลิตภาพยนตร์และโทรทัศน์ และการขยายความเป็นจริง เครื่องมือแก้ไข Downcodes จะนำคุณไปสู่รายละเอียดของเทคโนโลยีนี้ และวิธีที่เทคโนโลยีนี้จะเปลี่ยนแปลงอนาคตของการสร้างเนื้อหา 3 มิติ
เทคโนโลยี Edify3D ล่าสุดของ NVIDIA ได้สร้างความก้าวหน้าครั้งใหญ่ในด้านการสร้างสินทรัพย์ 3 มิติ เทคโนโลยีที่เป็นนวัตกรรมนี้สามารถสร้างโมเดล 3 มิติคุณภาพสูงที่มีแผนที่ UV ที่สมบูรณ์ พื้นผิว 4K และวัสดุ PBR ตามคำอธิบายข้อความหรือรูปภาพอ้างอิงได้ในเวลาเพียงสองนาที ปฏิวัติอุตสาหกรรมต่างๆ เช่น การออกแบบเกม การผลิตภาพยนตร์และโทรทัศน์ และโซลูชันการขยายความเป็นจริง
Edify3D ใช้สถาปัตยกรรมทางเทคนิคที่เป็นเอกลักษณ์ซึ่งผสมผสานโมเดลการแพร่กระจายหลายมุมมองเข้ากับเทคโนโลยีการสร้างใหม่โดยใช้ Transformer ไปป์ไลน์หลักประกอบด้วยสามขั้นตอนสำคัญ:
โมเดลการแพร่กระจายหลายมุมมองจะสร้างภาพ RGB จากหลายมุมมองตามอินพุต
Multi-view ControlNet สังเคราะห์สภาวะปกติของพื้นผิวที่สอดคล้องกัน
โมเดลที่สร้างขึ้นใหม่จะรวมข้อมูลนี้เข้ากับการนำเสนอแบบ 3 มิติแบบนิวรัลที่สร้างเรขาคณิตขั้นสุดท้ายผ่านการสกัดไอโซเซอร์เฟซและการประมวลผลหลังการประมวลผลแบบตาข่าย
ในการใช้งานจริง Edify3D แสดงให้เห็นประสิทธิภาพที่ยอดเยี่ยม ไม่เพียงสร้างโมเดล 3 มิติที่มีโครงสร้างตาข่ายที่แม่นยำ แต่ยังรับประกันพื้นผิวที่มีความละเอียดสูงและความสมบูรณ์ของแผนผังวัสดุอีกด้วย ระบบรองรับการสร้างสินทรัพย์ 3 มิติที่หลากหลายตั้งแต่กระเป๋าเป้ เครื่องเล่นแผ่นเสียง ไปจนถึงแขนหุ่นยนต์ และโมเดลที่สร้างขึ้นมีโทโพโลยีตาข่ายรูปสี่เหลี่ยมขนมเปียกปูนที่ปรับเปลี่ยนได้เพื่อให้ง่ายต่อการแก้ไขและเรนเดอร์ภายหลัง
เป็นเรื่องที่ควรกล่าวถึงเป็นอย่างยิ่งว่า Edify3D สามารถใช้เพื่อสร้างฉาก 3D ที่ซับซ้อนได้ ด้วยการรวมเข้ากับโมเดลภาษาขนาดใหญ่ (LLM) ระบบจึงสามารถกำหนดเค้าโครงฉาก ตำแหน่งวัตถุ และขนาดตามข้อความแจ้ง ทำให้เกิดการผสมผสานฉาก 3 มิติที่สอดคล้องและสมจริง คุณสมบัตินี้ให้การสนับสนุนที่มีประสิทธิภาพสำหรับแอปพลิเคชันต่างๆ เช่น การออกแบบงานศิลปะ การสร้างแบบจำลอง 3 มิติ และการจำลอง AI
เมื่อพูดถึงความสามารถในการปรับขนาดของเทคโนโลยี Edify3D ทำได้ดีเยี่ยม เมื่อจำนวนการดูการฝึกเพิ่มขึ้น คุณภาพและความสม่ำเสมอของรูปภาพที่สร้างโดยโมเดลจะปรับปรุงอย่างต่อเนื่อง ประสิทธิภาพของแบบจำลองที่สร้างขึ้นใหม่ยังได้รับการปรับปรุงเมื่อจำนวนมุมมองอินพุตเพิ่มขึ้น ในขณะที่ขนาดโทเค็นสามระนาบสามารถปรับได้อย่างยืดหยุ่นตามทรัพยากรการประมวลผล
การเปิดตัวเทคโนโลยีนี้นับเป็นยุคใหม่ในการสร้างเนื้อหา 3 มิติ โดยนำการปรับปรุงประสิทธิภาพและความเป็นไปได้ในการสร้างสรรค์มาสู่อุตสาหกรรมที่เกี่ยวข้องอย่างที่ไม่เคยมีมาก่อน
บทนำโดยละเอียด: https://research.nvidia.com/labs/dir/edify-3d/
โดยรวมแล้ว การเกิดขึ้นของเทคโนโลยี Edify3D จะส่งผลต่อการสร้างเนื้อหา 3D อย่างลึกซึ้งอย่างไม่ต้องสงสัย ประสิทธิภาพ คุณภาพสูง และความสะดวกในการใช้งานทำให้เป็นเครื่องมืออันทรงพลังสำหรับการสร้างแบบจำลอง 3 มิติและการออกแบบฉากในอนาคต เราหวังว่าจะมีการใช้เทคโนโลยีนี้ในสาขาต่างๆ มากขึ้น และนำประสบการณ์การรับชมภาพที่น่าทึ่งมาสู่เรามากขึ้น!