Kami menguji sendiri seberapa jauh AI memahami bahasa Indonesia dan bahasa daerahnya, memetakan kata yang menjebak penuturnya, dan menerbitkan angkanya beserta data mentah serta batasannya, termasuk ketika hasilnya tidak sesuai harapan kami sendiri.
Enam dari 40 item uji bahasa Jawa kami gugur. Bukan karena modelnya menjawab salah, melainkan karena aturan bukunya bertentangan dengan apa yang benar-benar diterima penutur.
Kami cocokkan 72.454 lema dengan dua juta kalimat bahasa Indonesia. Separuhnya tak muncul, dan daftar tandingannya sendiri ternyata cacat.
Peta lima alat internal kami dan cara masing-masing memverifikasi bahasa Indonesia, termasuk cara AI diuji, lengkap dengan tautan ke data mentahnya.