ด้วยการพัฒนาอย่างรวดเร็วของเทคโนโลยีปัญญาประดิษฐ์องค์กรที่สำคัญได้เพิ่มการลงทุนด้านการวิจัยและพัฒนาและนวัตกรรมทางเทคโนโลยีที่ได้รับการส่งเสริม เมื่อเร็ว ๆ นี้ Tencent Technology (Shenzhen) Co. , Ltd. ได้มีความคืบหน้าอย่างมีนัยสำคัญในการฝึกอบรมรูปแบบภาษาขนาดใหญ่และได้สมัครและเผยแพร่สิทธิบัตรที่เกี่ยวข้อง
เมื่อเร็ว ๆ นี้ Tencent Technology (Shenzhen) Co. , Ltd. ประกาศสิทธิบัตรเกี่ยวกับวิธีการฝึกอบรมและอุปกรณ์ที่เกี่ยวข้องของแบบจำลองภาษาขนาดใหญ่ในแอพ Tianyancha ชื่อของสิทธิบัตรนี้คือ "วิธีการฝึกอบรมอุปกรณ์อุปกรณ์คอมพิวเตอร์และสื่อจัดเก็บข้อมูลสำหรับรูปแบบภาษาขนาดใหญ่" และมีจุดมุ่งหมายเพื่อปรับปรุงความสามารถในการเรียนรู้และความถูกต้องของแบบจำลองภาษาขนาดใหญ่ผ่านวิธีการฝึกอบรมที่เป็นนวัตกรรม
ในกระบวนการฝึกอบรมของแบบจำลองภาษาขนาดใหญ่วิธีการดั้งเดิมมักจะพึ่งพาการสรุปข้อความเดียวซึ่งอาจนำไปสู่การ overfitting ของแบบจำลองและส่งผลกระทบต่อความแม่นยำและความหลากหลายของเนื้อหาที่สร้างขึ้น อย่างไรก็ตามวิธีการใหม่ของ Tencent นำเสนอแหล่งข้อมูลที่แตกต่างกันสองแหล่ง - ข้อความนามธรรมแรกและข้อความนามธรรมที่สอง จำนวนข้อมูลในข้อความนามธรรมทั้งสองนี้แตกต่างกันและข้อความนามธรรมแรกมีข้อความที่ถูกต้องและผิดซึ่งเป็นพื้นฐานสำหรับการเรียนรู้เปรียบเทียบ
วิธีการเรียนรู้แบบคอนทราสต์นี้ช่วยให้แบบจำลองสามารถเรียนรู้ในบทคัดย่อที่แตกต่างกันของข้อความเดียวกัน วิธีการที่เป็นนวัตกรรมนี้ไม่เพียง แต่ช่วยเพิ่มความสามารถในการวางนัยทั่วไปของแบบจำลองและช่วยให้สามารถทำงานได้ดีขึ้นเมื่อเผชิญกับข้อมูลที่ไม่รู้จัก แต่ยังช่วยเพิ่มความแม่นยำของแบบจำลองและลดความน่าจะเป็นในการสร้างเนื้อหาที่ไม่ถูกต้อง
ด้วยความก้าวหน้าอย่างต่อเนื่องของเทคโนโลยีปัญญาประดิษฐ์ขอบเขตการใช้งานของแบบจำลองภาษาขนาดใหญ่ได้กลายเป็นที่แพร่หลายมากขึ้นเรื่อย ๆ การประกาศสิทธิบัตรของ Tencent นับเป็นการพัฒนาทางเทคโนโลยีอีกครั้งในด้านการฝึกอบรมแบบจำลองภาษาขนาดใหญ่และคาดว่าจะให้คำแนะนำใหม่สำหรับการวิจัยและแอปพลิเคชันที่เกี่ยวข้องในอนาคต
อาจคาดการณ์ได้ว่าการพัฒนาเทคโนโลยีนี้จะส่งเสริมความก้าวหน้าอย่างต่อเนื่องของแอพพลิเคชั่นอัจฉริยะและช่วยให้ทุกวิถีชีวิตที่ดีขึ้นใช้ประโยชน์จากความสะดวกสบายที่เกิดจากปัญญาประดิษฐ์ในการเปลี่ยนแปลงทางดิจิตอล
ในระยะสั้นความก้าวหน้าของเทคโนโลยีปัญญาประดิษฐ์ไม่เพียง แต่ปรับปรุงประสิทธิภาพของแอพพลิเคชั่นที่มีอยู่ แต่ยังวางรากฐานที่มั่นคงสำหรับการพัฒนาในอนาคต