Materi
Draf soal dari AI datang lengkap dengan kunci, dan kunci itu bisa keliru: Bagian 2.6 panduan UNESCO mengingatkan model sering membuat pernyataan salah, dan Tabel 4 menyerahkan verifikasinya ke manusia. Urutan pemeriksaan yang mengikuti aturan Eberly Center: kerjakan soal sendiri sebelum melihat kunci, cocokkan jawaban dengan buku teks atau hitung ulang, lalu baca tiap pengecoh dan pastikan semuanya salah. Bila ada opsi lain yang ikut benar, soal melanggar aturan pertama Eberly, yaitu satu dan hanya satu jawaban terbaik. Kelas ini menyebut cacat itu pengecoh ganda.
Sesudah tiap butir, periksa set soalnya. Eberly meminta posisi jawaban benar berganti-ganti secara acak, sedangkan draf AI bisa menumpuk kunci di satu huruf. Hitung persentasenya: jumlah kunci di satu posisi dibagi jumlah soal, dikali 100. Eberly juga menyarankan meminta rekan membaca atau mengerjakan tes sebelum dipakai, karena soal yang jelas bagi penyusun belum tentu jelas bagi pembaca lain.
| Soal buatan AI (karangan) | Kunci AI | Hasil hitung ulang | Temuan |
|---|---|---|---|
| Hasil 7 × 8 adalah ... A. 54 B. 56 C. 58 D. 64 | A | 56 (opsi B) | Kunci salah |
| Bilangan kelipatan 5 adalah ... A. 12 B. 15 C. 22 D. 35 | B | 15 dan 35 | Pengecoh ganda |