Observatorium Bahasa Indonesia

Benchmark Nusantara

Kami menguji sendiri model AI pada bahasa Indonesia dan bahasa daerah, memakai soal dan kunci jawaban yang kami susun sendiri dan diperiksa oleh dua penutur. Angkanya diterbitkan apa adanya, lengkap dengan batasnya.Baca selengkapnya
6 benchmark471 soalPengujian terakhir

Bahasa daerah yang sudah terukur sejauh ini baru bahasa Jawa. Untuk Sunda, Madura, Bali, Batak, Bugis, dan Minang, datanya masih kami kumpulkan. Setnya belum ada, jadi belum ada angkanya. Kami menerbitkan angka hanya untuk yang sudah benar-benar diuji.

Setiap angka di sini dihitung dari soal yang sama untuk semua model, dan kuncinya tidak berubah di tengah pengujian.