Bidang AI open source telah berkembang pesat dalam beberapa tahun terakhir, namun masih terdapat kesenjangan dibandingkan dengan perusahaan teknologi besar. Kekuatan komputasi hanyalah satu aspek, dan aspek yang lebih penting adalah kurangnya solusi pasca-pelatihan. Terobosan terbaru AI2 (sebelumnya Allen Artificial Intelligence Institute) - program pasca-pelatihan Tülu3, memberikan senjata ampuh untuk menutup kesenjangan ini. Editor Downcodes akan memberi Anda pemahaman mendalam tentang bagaimana teknologi ini memberdayakan AI open source dan membuat model bahasa besar yang awalnya sulit dikendalikan menjadi mudah digunakan dan disesuaikan.
Di bidang AI open source, kesenjangan dengan perusahaan teknologi besar tidak hanya tercermin pada kekuatan komputasi. AI2 (sebelumnya Allen Artificial Intelligence Institute) menjembatani kesenjangan ini melalui serangkaian inisiatif inovatif. Program pasca-pelatihan Tülu3 yang baru dirilis membuatnya dapat mengubah model bahasa besar asli menjadi sistem AI praktis.
Berbeda dengan kognisi umum, model bahasa dasar tidak dapat digunakan secara langsung setelah pra-pelatihan. Faktanya, proses pasca pelatihan adalah mata rantai utama yang menentukan nilai akhir model. Pada tahap inilah model bertransformasi dari jaringan mahatahu yang tidak memiliki penilaian menjadi alat praktis dengan orientasi fungsional tertentu.
Sejak lama, perusahaan-perusahaan besar merahasiakan program pasca pelatihan. Meskipun siapa pun dapat membuat model menggunakan teknologi terkini, teknik pasca-pelatihan yang unik diperlukan agar model dapat berguna dalam bidang tertentu, seperti konseling psikologis atau analisis penelitian. Bahkan untuk proyek seperti Meta's Llama, yang diiklankan sebagai sumber terbuka, sumber model aslinya dan metode pelatihan umum masih dirahasiakan.
Kemunculan Tülu3 mengubah situasi ini. Rangkaian solusi pasca-pelatihan yang lengkap ini mencakup berbagai proses mulai dari pemilihan topik hingga pengelolaan data, mulai dari pembelajaran penguatan hingga penyesuaian. Pengguna dapat menyesuaikan kemampuan model sesuai kebutuhannya, seperti memperkuat kemampuan matematika dan pemrograman, atau mengurangi prioritas pemrosesan multi-bahasa.
Pengujian AI2 menunjukkan bahwa performa model yang dilatih oleh Tülu3 telah mencapai level model open source teratas. Terobosan ini penting: memberikan perusahaan pilihan yang sepenuhnya otonom dan terkendali. Khususnya bagi institusi yang menangani data sensitif, seperti penelitian medis, mereka tidak perlu lagi bergantung pada API pihak ketiga atau layanan yang disesuaikan. Mereka dapat menyelesaikan seluruh proses pelatihan secara lokal, sehingga menghemat biaya dan melindungi privasi.
AI2 tidak hanya merilis solusi ini, namun juga memimpin penerapannya pada produknya sendiri. Meskipun hasil pengujian saat ini didasarkan pada model Llama, mereka memiliki rencana untuk meluncurkan model baru berdasarkan OLMo mereka sendiri dan dilatih oleh Tülu3, yang akan menjadi solusi sumber terbuka sepenuhnya dari awal hingga akhir.
Teknologi open source ini tidak hanya menunjukkan tekad AI2 untuk mendorong demokratisasi AI, namun juga memberikan dorongan kepada seluruh komunitas AI open source. Hal ini membawa kita selangkah lebih dekat menuju ekosistem AI yang benar-benar terbuka dan transparan.
Sumber terbuka Tülu3 menandai langkah maju yang besar di bidang AI sumber terbuka. Hal ini menurunkan ambang batas penerapan AI, mendorong keadilan dan berbagi teknologi AI, serta menghadirkan kemungkinan tak terbatas untuk pengembangan AI di masa depan. Kami menantikan munculnya lebih banyak proyek open source serupa untuk bersama-sama membangun ekosistem AI yang lebih sejahtera.