มหาวิทยาลัยเจ้อเจียงและมหาวิทยาลัยอาลีบาบาดาร่วมกันเปิดตัวการวิจัยที่ก้าวหน้า: การใช้วิดีโอการสอนเพื่อสร้างชุดข้อมูลตำราเรียนหลายรูปแบบคุณภาพสูง การศึกษาครั้งนี้มีวัตถุประสงค์เพื่อแก้ปัญหาของแบบจำลองภาษาขนาดใหญ่ที่มีอยู่ (VLMS) ความหนาแน่นของข้อมูลความรู้ล่วงหน้าและความสัมพันธ์กราฟิกที่อ่อนแอจัดเตรียมสื่อการฝึกอบรมที่มีคุณภาพมากขึ้นสำหรับ VLMS และคิดค้นการใช้ทรัพยากรการศึกษา ทีมวิจัยได้รวบรวมและจัดการวิดีโอการสอนจำนวนมากและในที่สุดก็สร้างชุดข้อมูลคุณภาพสูงซึ่งครอบคลุมหลายสาขาวิชาและความยาวทั้งหมดมากกว่า 22,000 ชั่วโมงให้ความเป็นไปได้ใหม่สำหรับการประยุกต์ใช้ปัญญาประดิษฐ์ในสาขาการศึกษา
เมื่อเร็ว ๆ นี้มหาวิทยาลัยเจ้อเจียงและอาลีบาบา Mosho ร่วมกันเปิดตัวการศึกษาที่น่าทึ่งซึ่งมีวัตถุประสงค์เพื่อสร้างตำราหลายรูปแบบคุณภาพสูงผ่านวิดีโอการสอน ผลการวิจัยของนวัตกรรมนี้ไม่เพียง แต่ให้แนวคิดใหม่สำหรับการฝึกอบรมแบบจำลองภาษาขนาดใหญ่ (VLMS) แต่ยังอาจเปลี่ยนการใช้ทรัพยากรการศึกษา
ด้วยการพัฒนาอย่างรวดเร็วของเทคโนโลยีปัญญาประดิษฐ์ความอยากอาหารก่อนการฝึกอบรมของ VLMS ส่วนใหญ่อาศัยกราฟิกและข้อความ -ข้อความที่จะผสม อย่างไรก็ตามข้อมูลปัจจุบันส่วนใหญ่มาจากหน้าเว็บ
เพื่อรับมือกับความท้าทายนี้ทีมวิจัยตัดสินใจที่จะปรับแต่งความรู้และคลังข้อมูลคุณภาพสูงจากวิดีโอการสอนของอินเทอร์เน็ตเซี่ยงไฮ้ พวกเขารวบรวมวิดีโอการสอนมากกว่า 159,000 รายการ
นักวิจัยได้ออกแบบท่อประมวลผล "วิดีโอไปยังตำรา" ที่ซับซ้อน ก่อนอื่นใช้เทคโนโลยีการจดจำเสียงอัตโนมัติ (ASR) เพื่อคัดลอกเนื้อหาของวิดีโอลงในข้อความจากนั้นคัดกรองคลิปที่เกี่ยวข้องอย่างมากกับจุดความรู้ผ่านการวิเคราะห์ภาพและการจับคู่ข้อความ ในท้ายที่สุดเฟรมคีย์การประมวลผลเหล่านี้ข้อความ OCR และข้อความการถอดความถูกเซแล้วสร้างตำราเรียนหลายโหมดที่มีเนื้อหาที่หลากหลายและโครงสร้างที่เข้มงวด
ผลลัพธ์เบื้องต้นของการศึกษานี้แสดงให้เห็นว่าเมื่อเทียบกับชุดข้อมูลก่อนหน้าของศูนย์เว็บเพจชุดข้อมูลตำราเรียนที่สร้างขึ้นใหม่ได้ปรับปรุงความหนาแน่นของความรู้และความสัมพันธ์ของภาพอย่างมีนัยสำคัญซึ่งเป็นรากฐานที่แข็งแกร่งยิ่งขึ้นสำหรับการเรียนรู้ VLM นอกจากนี้การวิจัยยังดึงดูดความสนใจอย่างกว้างขวางในชุมชนวิชาการ
ด้วยความพยายามที่เป็นนวัตกรรมนี้นักวิจัยหวังว่าไม่เพียง แต่สามารถส่งเสริมการพัฒนาของ VLM แต่ยังเริ่มต้นความเป็นไปได้ใหม่ในการรวมและการประยุกต์ใช้ทรัพยากรการศึกษา
ที่อยู่วิทยานิพนธ์: https://arxiv.org/pdf/2501.00958
ผลการวิจัยนี้ไม่เพียง แต่มีความสำคัญต่อปัญญาประดิษฐ์เท่านั้น แต่ยังให้ทิศทางใหม่สำหรับการปฏิรูปรูปแบบการศึกษาในอนาคตซึ่งบ่งชี้ว่าเทคโนโลยีปัญญาประดิษฐ์นั้นถูกนำมาใช้อย่างกว้างขวางในด้านการศึกษา แหล่งที่มาของชุดข้อมูลนี้ยังให้ทรัพยากรที่มีค่าสำหรับนักวิจัยระดับโลกและส่งเสริมความร่วมมือและการแลกเปลี่ยนแวดวงวิชาการ