บรรณาธิการของ Downcodes ได้เรียนรู้ว่า Waymo เพิ่งประกาศการพัฒนาที่สำคัญ: การพัฒนาโมเดลการฝึกอบรมใหม่ EMMA โดยใช้โมเดลภาษาขนาดใหญ่หลายรูปแบบ (MLLM) Gemini ของ Google สำหรับการพัฒนารถแท็กซี่ไร้คนขับ EMMA สามารถประมวลผลข้อมูลเซ็นเซอร์ สร้างเส้นทางในอนาคตของยานพาหนะขับเคลื่อนอัตโนมัติ และช่วยเหลือการตัดสินใจของยานพาหนะในการวางแผนเส้นทางและการหลีกเลี่ยงสิ่งกีดขวาง การพัฒนาครั้งนี้ถือเป็นการใช้งาน MLLM ที่สำคัญครั้งแรกในด้านการขับขี่อัตโนมัติ และบ่งชี้ว่าสถานการณ์การใช้งานของ LLM จะขยายจากหุ่นยนต์แชท การจัดการอีเมล ฯลฯ ไปสู่สภาพแวดล้อมบนท้องถนนแบบใหม่
โมเดล EMMA เป็นหนึ่งในสัญญาณแรกๆ ที่ผู้นำในแผนการขับขี่อัตโนมัติใช้ MLLM ในการดำเนินงาน ซึ่งแสดงให้เห็นว่า LLM เหล่านี้สามารถก้าวไปไกลกว่าการใช้งานในปัจจุบัน เช่น แชทบอท ผู้จัดการอีเมล และเครื่องสร้างรูปภาพ และค้นหาหนทางสู่สภาพแวดล้อมใหม่ทั้งหมด ของถนน ค้นหาแอปพลิเคชัน
ทีมวิจัยของ Waymo กล่าวว่า MLLM เช่น Gemini นำเสนอโซลูชันที่น่าสนใจสำหรับระบบขับเคลื่อนด้วยตนเองด้วยเหตุผลสองประการ: แชทบอทเป็น "ผู้ทั่วไป" ที่ได้รับการฝึกอบรมเกี่ยวกับข้อมูลจำนวนมากที่คัดลอกมาจากอินเทอร์เน็ต และ "สามารถให้ข้อมูลที่นอกเหนือไปจาก "ความรู้ระดับโลก" ที่หลากหลายของ เนื้อหาที่มีอยู่ในบันทึกการขับขี่ทั่วไป" ซึ่งแสดงให้เห็นถึงความสามารถในการให้เหตุผล "ดีเยี่ยม" ผ่านเทคนิคต่างๆ เช่น "การใช้เหตุผลแบบลูกโซ่ความคิด" ซึ่งเลียนแบบการใช้เหตุผลของมนุษย์โดยแบ่งงานที่ซับซ้อนออกเป็นชุดขั้นตอนเชิงตรรกะ
โมเดล EMMA ของ Waymo ทำงานได้ดีในการทำนายวิถี การตรวจจับวัตถุ และการทำความเข้าใจแผนที่ถนน แต่ก็มีข้อจำกัดเช่นกัน เช่น ไม่สามารถรวมอินพุตเซ็นเซอร์ 3 มิติจากไลดาร์หรือเรดาร์ และความสามารถในการประมวลผลเฟรมภาพจำนวนเล็กน้อยที่ เวลา นอกจากนี้ยังมีความเสี่ยงในการใช้ MLLM เพื่อฝึกแท็กซี่ไร้คนขับ เช่น โมเดลอาจมีอาการประสาทหลอนหรือไม่สามารถทำงานง่ายๆ ได้
- ด้วยเหตุนี้ Waymo จึงกล่าวว่าจำเป็นต้องมีการวิจัยเพิ่มเติมเพื่อลดปัญหาเหล่านี้ และพัฒนาสถาปัตยกรรมโมเดลการขับขี่ด้วยตนเองที่ล้ำสมัยต่อไป
แม้ว่าโมเดล EMMA ของ Waymo จะมีข้อจำกัดบางประการ แต่ความก้าวหน้าทางเทคโนโลยีในด้านการขับขี่แบบอัตโนมัติยังคงน่าประทับใจ ในอนาคต ด้วยการพัฒนาและปรับปรุงเทคโนโลยีอย่างต่อเนื่อง ผมเชื่อว่าเทคโนโลยีการขับขี่อัตโนมัติบน MLLM จะทำให้เราได้รับประสบการณ์การเดินทางที่ปลอดภัยและสะดวกสบายยิ่งขึ้น บรรณาธิการของ Downcodes จะยังคงให้ความสนใจกับความคืบหน้าในการติดตามผลของ Waymo ต่อไป ดังนั้นโปรดคอยติดตาม!