Kalibrasi model
Calibration · Reliability diagram · Skor jujur
Apakah probabilitas model jujur: dari 100 prediksi '80% churn', benarkah ~80 yang churn? Dicek via kurva kalibrasi per desil skor.
Cara menyuruh agent
✕ Kurang tepat
“Skor 80% artinya 80% bakal churn?”
✓ Lebih tepat
“Cek kalibrasi skor churn ini: bandingkan skor prediksi vs kejadian aktual per desil (reliability diagram).”
Skor ranking bagus (AUC tinggi) belum tentu peluangnya jujur.
Yang perlu dicek di jawaban agent
Ada perbandingan prediksi-vs-aktual per kelompok skor, bukan klaim 'skor = peluang'.
Istilah terkait
Latih istilah seperti ini bersama agent sungguhan
Setiap kasus berisi data nyata yang berantakan, permintaan bos, dan agent yang hanya bekerja sebaik instruksimu.
Lihat kasus