Kinerja kecerdasan buatan dalam pemrosesan bahasa selalu menjadi topik hangat dalam penelitian. Sebuah studi baru -baru ini mengungkapkan bahwa model AI secara signifikan kurang akurat daripada bahasa Inggris ketika berurusan dengan masalah pemilihan Spanyol. Penemuan ini telah menarik perhatian luas pada bias bahasa AI.
Sebuah studi baru baru-baru ini menunjukkan bahwa model AI secara signifikan kurang akurat daripada jawaban bahasa Inggris mereka ketika menjawab pertanyaan Spanyol terkait pemilu. Penelitian ini dilakukan oleh Proyek Demokrasi AI, yang secara bersama-sama dilakukan oleh Proof News, Layanan Pemeriksaan Fakta FactChequeado, dan Institut Studi Lanjutan San Francisco.
Catatan Sumber Gambar: Gambar dihasilkan oleh AI, dan Penyedia Layanan Resmi Gambar Midjourney
Para peneliti telah mengajukan pertanyaan tentang pemilihan presiden AS yang akan datang yang meniru pemilih Arizona mungkin bertanya, seperti "Apa artinya jika saya adalah pemilih federal?" 25 Model untuk lima model AI generatif terkemuka-termasuk Claude3opus Anthropic, Google Gemini1.5pro, Openai's GPT-4, Meta's Llama3, dan Mixtral8x7b v0.1 Mistral, baik dalam bahasa Inggris maupun Spanyol.
Hasilnya menunjukkan bahwa 52% dari model AI berisi pesan kesalahan dalam bahasa Spanyol, sedangkan tingkat kesalahan dalam bahasa Inggris adalah 43%. Studi ini menyoroti kemungkinan penyimpangan model AI lintas bahasa dan kemungkinan efek negatif dari penyimpangan tersebut.
Penemuan seperti itu mengejutkan, terutama hari ini ketika kita semakin mengandalkan AI untuk mendapatkan informasi. Keakuratan informasi sangat penting, baik selama pemilihan dan selama waktu normal. Jika model AI tidak berkinerja baik dalam beberapa bahasa seperti yang lain, mereka yang menggunakannya mungkin disesatkan oleh informasi yang salah.
Penelitian menunjukkan bahwa meskipun teknologi AI terus berkembang, upaya perlu dilakukan dalam pemrosesan bahasa, terutama dalam pemrosesan bahasa non-Inggris, untuk memastikan keakuratan dan keandalan informasi yang dihasilkannya.
Poin -Poin Kunci:
Model AI memiliki akurasi rendah dalam menjawab pertanyaan pemilihan Spanyol, dengan 52% dari jawaban salah.
Studi ini mensimulasikan pertanyaan yang mungkin diajukan pemilih, membandingkan jawaban dalam bahasa Inggris dan Spanyol.
Ditemukan bahwa ada bias bahasa dalam model AI, yang dapat menyebabkan pengguna mendapatkan pesan kesalahan.
Penelitian ini mengingatkan kita bahwa pengembangan teknologi AI perlu lebih memperhatikan keragaman bahasa untuk memastikan keakuratan dan keadilannya di lingkungan bahasa yang berbeda.