Kami menguji sendiri seberapa jauh AI memahami bahasa Indonesia dan bahasa daerahnya, memetakan kata yang menjebak penuturnya, dan menerbitkan angkanya beserta data mentah serta batasannya, termasuk ketika hasilnya tidak sesuai harapan kami sendiri.
Hipotesisnya masuk akal: biarkan model bahasa kontekstual memilih kandidat koreksi terbaik berdasarkan makna kalimat. Diuji A/B dengan satu sakelar dan kunci jawaban 1.500 pasang, akurasi saran justru turun dari 88,3 persen ke 77,1 persen, sementara model itu memakan 98,5 persen waktu analisis.
Sebelum menulis aturan tata bahasa dari nol, kami menambang seluruh basis aturan LanguageTool untuk mencari apa yang bisa dipinjam. Sepertiganya mustahil dipakai, dan modul untuk bahasa kita tidak ada.
Tingkat lolosnya 5,8%. Angka itu adalah harga sebenarnya dari verifikasi, dan alasan kenapa "biar AI saja yang urus" bukan jawaban.
Kami arahkan pemeriksa ejaan buatan sendiri ke tulisan orang sungguhan, bukan ke kalimat uji. Ia menandai 3.740 hal, dan sebagian besar bukan kesalahan. Ini catatan delapan ronde perbaikannya.