ARC AGI
ARC-AGI 1.0.2
พื้นที่เก็บข้อมูลนี้มีข้อมูลงาน ARC-AGI รวมถึงอินเทอร์เฟซบนเบราว์เซอร์เพื่อให้มนุษย์ลองใช้มือในการแก้ปัญหาด้วยตนเอง
"ARC สามารถมองได้ว่าเป็นเกณฑ์มาตรฐานปัญญาประดิษฐ์ทั่วไป เป็นเกณฑ์มาตรฐานการสังเคราะห์โปรแกรม หรือเป็นการทดสอบความฉลาดทางไซโครเมทริก โดยมีเป้าหมายอยู่ที่ทั้งมนุษย์และระบบอัจฉริยะเทียมที่มีจุดมุ่งหมายเพื่อเลียนแบบความฉลาดทางของเหลวทั่วไปในรูปแบบที่เหมือนมนุษย์"
คำอธิบายโดยสมบูรณ์ของชุดข้อมูล เป้าหมาย และตรรกะพื้นฐานมีอยู่ใน: On the Measure of Intelligence
เพื่อเป็นการเตือนความจำ ผู้สอบถูกกล่าวว่าต้องแก้ปัญหางานเมื่อเห็นงานเป็นครั้งแรก พวกเขาสามารถสร้างตารางเอาท์พุตที่ถูกต้องสำหรับอินพุตทดสอบ ทั้งหมด ในงาน (ซึ่งรวมถึงการเลือกขนาดของเอาท์พุตด้วย ตาราง) สำหรับการป้อนข้อมูลการทดสอบแต่ละครั้ง ผู้สอบจะได้รับอนุญาตให้ทำการทดลองได้ 3 ครั้ง (ซึ่งใช้ได้กับผู้สอบทุกคน ไม่ว่าจะเป็นมนุษย์หรือ AI)
ไดเร็กทอรี data มีสองไดเร็กทอรีย่อย:
data/training : มีไฟล์งานสำหรับการฝึกอบรม (400 งาน) ใช้สิ่งเหล่านี้เพื่อสร้างต้นแบบอัลกอริทึมของคุณหรือฝึกอัลกอริทึมของคุณเพื่อรับความรู้ความเข้าใจที่เกี่ยวข้องกับ ARCdata/evaluation : ประกอบด้วยไฟล์งานสำหรับการประเมินผล (400 งาน) ใช้สิ่งเหล่านี้เพื่อประเมินอัลกอริทึมขั้นสุดท้ายของคุณ เพื่อให้มั่นใจถึงผลการประเมินที่ยุติธรรม อย่าให้ข้อมูลจากชุดการประเมินรั่วไหลไปยังอัลกอริทึมของคุณ (เช่น โดยการดูงานการประเมินด้วยตัวเองในระหว่างการพัฒนา หรือโดยการปรับเปลี่ยนอัลกอริทึมซ้ำๆ ในขณะที่ใช้คะแนนการประเมินเป็นข้อเสนอแนะ)งานจะถูกจัดเก็บในรูปแบบ JSON ไฟล์ JSON ของงานแต่ละไฟล์จะมีพจนานุกรมที่มี 2 ช่อง ดังนี้
"train" : คู่อินพุต/เอาต์พุตสาธิต มันคือรายการ "คู่" (โดยทั่วไปคือ 3 คู่)"test" : ทดสอบคู่อินพุต/เอาต์พุต มันคือรายการ "คู่" (โดยทั่วไปคือ 1 คู่)"คู่" คือพจนานุกรมที่มีสองช่อง:
"input" : อินพุต "grid" สำหรับคู่"output" : เอาต์พุต "grid" สำหรับคู่"กริด" คือเมทริกซ์สี่เหลี่ยม (รายการรายการ) ของจำนวนเต็มระหว่าง 0 ถึง 9 (รวม) ขนาดตารางที่เล็กที่สุดที่เป็นไปได้คือ 1x1 และใหญ่ที่สุดคือ 30x30
เมื่อดูงาน ผู้ทดสอบจะสามารถเข้าถึงอินพุตและเอาท์พุตของคู่สาธิต รวมถึงอินพุตของคู่การทดสอบ เป้าหมายคือการสร้างตารางเอาท์พุตที่สอดคล้องกับตารางอินพุตทดสอบ โดยใช้การทดลอง 3 ครั้งสำหรับอินพุตทดสอบแต่ละรายการ "การสร้างตารางเอาต์พุต" เกี่ยวข้องกับการเลือกความสูงและความกว้างของตารางเอาต์พุต จากนั้นเติมแต่ละเซลล์ในตารางด้วยสัญลักษณ์ (จำนวนเต็มระหว่าง 0 ถึง 9 ซึ่งแสดงเป็นสี) เฉพาะคำตอบ ที่ถูกต้อง เท่านั้น (ทุกเซลล์ตรงกับคำตอบที่คาดหวัง) เท่านั้นจึงจะถือว่าถูกต้อง
อินเทอร์เฟซการทดสอบอยู่ที่ apps/testing_interface.html เปิดในเว็บเบราว์เซอร์ (แนะนำ Chrome) ระบบจะแจ้งให้คุณเลือกไฟล์ JSON ของงาน
หลังจากโหลดงานแล้ว คุณจะเข้าสู่พื้นที่ทดสอบซึ่งมีลักษณะดังนี้:
ทางด้านซ้าย คุณจะเห็นคู่อินพุต/เอาต์พุตที่สาธิตลักษณะของงาน ตรงกลาง คุณจะเห็นตารางอินพุตการทดสอบปัจจุบัน ทางด้านขวา คุณจะเห็นตัวควบคุมที่คุณสามารถใช้เพื่อสร้างตารางเอาต์พุตที่สอดคล้องกัน
คุณสามารถเข้าถึงเครื่องมือต่อไปนี้:
เมื่อตารางผลลัพธ์ของคุณพร้อมแล้ว ให้คลิกที่สีเขียว "ส่ง!" ปุ่มเพื่อตรวจสอบคำตอบของคุณ เราไม่บังคับใช้กฎการทดลองใช้ 3 ครั้ง
หลังจากที่คุณได้รับคำตอบที่ถูกต้องสำหรับตารางอินพุตการทดสอบปัจจุบันแล้ว คุณสามารถสลับไปยังตารางอินพุตการทดสอบถัดไปสำหรับงานได้โดยใช้ปุ่ม "อินพุตการทดสอบถัดไป" (หากมีอยู่ งานส่วนใหญ่มีเพียงอินพุตทดสอบเดียวเท่านั้น) .
เมื่อคุณทำงานเสร็จแล้ว ให้ใช้ปุ่ม "โหลดงาน" เพื่อเปิดงานใหม่
