Jijia Technology เพิ่งเปิดตัวกรอบการสร้างฉากการขับขี่แบบ 4D ใหม่ที่เรียกว่า DrivedReamer4D สภาพถนน DrivedReamer4D ขยายข้อมูลการฝึกอบรมได้อย่างมีประสิทธิภาพและปรับปรุงความแข็งแกร่งของแบบจำลองอย่างมากโดยการแนะนำรูปแบบโลก
วิธีการสร้างฉาก 4D แบบดั้งเดิมส่วนใหญ่อาศัยโรงเรียนสำคัญสองแห่ง: NERF และ 3DGS NERF ใช้เครือข่ายประสาทเพื่อแสดงภาพถ่ายเป็นรุ่น 3 มิติในขณะที่ 3DGS ใช้ฟังก์ชั่นเกาส์สามมิติเพื่อจำลองวัตถุในฉาก อย่างไรก็ตามทั้งสองวิธีพึ่งพาข้อมูลการฝึกอบรมอย่างมากและดำเนินการได้ไม่ดีเมื่อต้องรับมือกับสภาพถนนที่ซับซ้อน (เช่นการเปลี่ยนแปลงเลนการเร่งความเร็วและการชะลอตัว) DrivedReamer4D แนะนำแบบจำลองโลกเพื่อทำนายสถานการณ์ในอนาคตที่เป็นไปได้และสร้างข้อมูลวิดีโอมุมมองใหม่ภายใต้สภาพถนนที่ซับซ้อนต่าง ๆ ซึ่งเทียบเท่ากับการให้ข้อมูลการฝึกอบรม "ชดเชยสมอง" สำหรับรูปแบบการสร้างฉาก 4D นอกจากนี้โมดูลการสร้างวิถีใหม่ (NTGM) จะสร้างวิถีใหม่ที่หลากหลายโดยอัตโนมัติซึ่งสอดคล้องกับกฎการจราจรและใช้โมเดลโลกเพื่อสร้างวิดีโอจากมุมมองที่สอดคล้องกันทำให้แบบจำลองได้ง่ายภายใต้สภาพถนนที่ซับซ้อนต่างๆ ผลการทดลองแสดงให้เห็นว่าผลการฟื้นฟูของ DrivedReamer4D ในการจัดการกับสภาพถนนที่ซับซ้อนนั้นดีกว่าวิธีการดั้งเดิมอย่างมีนัยสำคัญภาพที่สร้างขึ้นนั้นมีความเที่ยงตรงมากขึ้นและสามารถฟื้นฟูตำแหน่งของยานพาหนะและเส้นเลนได้อย่างแม่นยำ การเกิดขึ้นของ DrivedReamer4D คาดว่าจะปรับปรุงประสิทธิภาพความปลอดภัยและความน่าเชื่อถือของการวิจัยและพัฒนาและทดสอบการขับเคลื่อนด้วยตนเองอย่างมีนัยสำคัญ
แต่ทั้งสองวิธีมีจุดอ่อนที่ร้ายแรง: พวกเขาพึ่งพาข้อมูลการฝึกอบรมมากเกินไป! ดังนั้นเมื่อเผชิญกับสภาพถนนที่ซับซ้อนเช่นการเปลี่ยนแปลงเลนการเร่งความเร็วและการชะลอตัวพวกเขามีแนวโน้มที่จะพลิกคว่ำ
เพื่อแก้ปัญหานี้ Jijia Technology ได้เปิดตัวนักฆ่าตัวใหญ่ - DrivedReamer4D ในครั้งนี้ ในระยะสั้นสิ่งนี้คือการเพิ่มโมเดล AI Plug-in-the World ให้กับการสร้างฉาก 4D ใหม่
คุณสามารถเข้าใจรูปแบบของโลกเป็นสมอง AI ที่สามารถทำนายสิ่งที่อาจเกิดขึ้นในอนาคตตามข้อมูลที่มีอยู่ DrivedReamer4D ใช้โมเดลโลกเพื่อสร้างข้อมูลวิดีโอมุมมองใหม่ภายใต้สภาพถนนที่ซับซ้อนซึ่งเทียบเท่ากับการให้อาหารแบบจำลองการสร้างฉาก 4D การสร้างใหม่ "การชดเชยสมอง" เพื่อให้สามารถมีความรู้และไม่ล้มเหลวอีกต่อไป
สิ่งที่ยอดเยี่ยมยิ่งกว่านั้นคือ DrivedReamer4D ยังออกแบบโมดูลการสร้างแทร็กใหม่ (NTGM) เป็นพิเศษ สิ่งนี้สามารถสร้างวิถีใหม่ต่าง ๆ ที่ตรงกับกฎการจราจรเช่นการเปลี่ยนแปลงเลนการเร่งความเร็วการชะลอตัว ฯลฯ จากนั้นใช้โมเดลโลกเพื่อสร้างวิดีโอจากมุมมองที่สอดคล้องกันซึ่งเทียบเท่ากับการขอ "Schooler" สำหรับ รูปแบบการสร้างฉาก 4D
ผลการทดลองยังพิสูจน์ความแข็งแกร่งของ DrivedReamer4D เมื่อจัดการกับสภาพถนนที่ซับซ้อนเอฟเฟกต์การสร้างใหม่นั้นดีกว่าวิธีการดั้งเดิมอย่างมีนัยสำคัญภาพที่สร้างขึ้นนั้นมีความเที่ยงตรงมากขึ้นและสามารถกู้คืนตำแหน่งของยานพาหนะและเส้นเลนได้อย่างแม่นยำ
ในระยะสั้นการเกิดขึ้นของ DrivedReamer4D นั้นเหมือนกับการขว้างระเบิดนิวเคลียร์ในสนามของการสร้างฉาก 4D ซึ่งระเบิดเพดานเทคโนโลยีโดยตรง ด้วยการวิจัยและพัฒนาและทดสอบการขับขี่แบบอิสระจะมีประสิทธิภาพมากขึ้นปลอดภัยและเชื่อถือได้
แน่นอนว่า DrivedReamer4D ยังอยู่ในขั้นตอนการวิจัยและยังมีอีกหลายสิ่งที่ต้องปรับปรุงในอนาคต แต่ฉันเชื่อว่าเมื่อเทคโนโลยียังคงพัฒนามันจะแข็งแกร่งขึ้นและในที่สุดก็กลายเป็นส่วนที่ขาดไม่ได้ของการขับขี่แบบอิสระ
ที่อยู่กระดาษ: https://arxiv.org/pdf/2410.13571
หน้าแรกของโครงการ: https://drivedreamer4d.github.io/
ที่อยู่รหัส: https://github.com/gigaai-research/drivedreamer4d
การเกิดขึ้นของเฟรมเวิร์ก DrivedReamer4D ได้นำความก้าวหน้าของการปฏิวัติมาสู่เทคโนโลยีการฟื้นฟูฉาก 4D และโอกาสในการใช้งานในด้านการขับขี่แบบอิสระนั้นคุ้มค่าที่จะรอคอย แม้ว่ามันจะยังอยู่ในขั้นตอนการวิจัยประสิทธิภาพที่ทรงพลังและโอกาสในการใช้งานที่กว้างขวางบ่งชี้ว่าเทคโนโลยีการขับขี่แบบอิสระจะย้ายไปสู่ความสูงใหม่