เมื่อเร็วๆ นี้ Jeff Dean หัวหน้า AI ของ Google และหัวหน้านักวิทยาศาสตร์ของ OpenAI ได้รับรางวัล "Time Test Award" ของ NeurIPS จากรายงาน word2vec ของพวกเขา ซึ่งทำให้เกิดการอภิปรายอย่างดุเดือด บทความที่แปลกใหม่นี้เมื่อสิบปีที่แล้วถูกปฏิเสธอย่างเป็นเอกฉันท์โดยการประชุม ICLR ในขณะนั้น สิ่งนี้เน้นย้ำถึงความยากลำบากในการประเมินผลกระทบในอนาคตของงานวิจัย ตลอดจนความล่าช้าในการตัดสินทางวิชาการเกี่ยวกับการวิจัยเชิงนวัตกรรมในบางครั้ง บทความนี้จะเจาะลึกประสบการณ์ของรายงาน word2vec และแนวคิดผลลัพธ์เกี่ยวกับกลไกการประเมินผลทางวิชาการ
Jeff Dean หัวหน้า AI ของ Google และหัวหน้านักวิทยาศาสตร์ของ OpenAI เพิ่งได้รับรางวัล "การทดสอบเวลา" ของ NeurIPS จากงานวิจัย word vector technology ที่ก้าวล้ำ word2vec ที่เสนอเมื่อ 10 ปีที่แล้ว อย่างไรก็ตาม โทมัส มิโคลอฟ หนึ่งในผู้เขียนรายงานฉบับนี้ เปิดเผยว่ารายงานดังกล่าวถูกปฏิเสธอย่างเป็นเอกฉันท์ในการประชุม ICLR ครั้งแรกในปี 2013 ในความเป็นจริง บทความและผลงานจำนวนมากที่ต่อมามีอิทธิพลอย่างกว้างขวางถูกปฏิเสธโดยการประชุมชั้นนำเมื่อส่งครั้งแรก ซึ่งแสดงให้เห็นว่าเป็นเรื่องยากมากที่จะประเมินอิทธิพลในอนาคตของเอกสาร นักวิจัยไม่ควรท้อแท้หลังจากถูกปฏิเสธ แต่ควรรับข้อเสนอแนะเพื่อปรับปรุงงานวิจัยแล้วส่งไปยังงานวิจัยระดับสูงอื่นๆประสบการณ์ของรายงาน word2vec มอบประสบการณ์อันมีค่าสำหรับนักวิจัยทางวิทยาศาสตร์ และเตือนเราอีกครั้งว่าการประเมินผลทางวิชาการไม่ได้เกิดขึ้นได้ในชั่วข้ามคืน และต้องใช้เวลาและการทดสอบภาคปฏิบัติ ความเพียรพยายามและการปรับปรุงอย่างต่อเนื่องจะนำไปสู่การยอมรับในที่สุด ในอนาคตการประเมินผลการวิจัยทางวิทยาศาสตร์อย่างมีประสิทธิภาพมากขึ้นนั้นคุ้มค่ากับการคิดเชิงลึกของเรา