Prinsip & jebakan
Pareto, Simpson, Bayes, base rate, Goodhart, Benford, Berkson, cherry picking, dan kawan-kawan: konsep yang bikin analis naik kelas.
Prinsip Pareto (80/20)Pareto principle · Aturan 80/20 · ABC
Sebagian kecil penyebab menjelaskan sebagian besar hasil (misalnya 20% SKU menyumbang 80% revenue) — alasan untuk fokus, bukan meratakan usaha.
Paradoks SimpsonSimpson's paradox · Agregasi menipu
Tren di level gabungan berbalik arah saat dipecah per grup (misalnya conversion naik total tapi turun di semua channel karena porsi channel berubah).
Regression to the meanRegresi ke rata-rata
Nilai ekstrem cenderung kembali mendekati rata-rata di periode berikut tanpa intervensi apa pun — jebakan klaim "program berhasil".
Base rate fallacyKekeliruan base rate · Bayes
Lupa prevalensi awal: tes 99% akurat tetap mostly false alarm kalau yang dicari langka (misalnya 1 dari 1000).
Law of small numbersHukum angka kecil · Sampel kecil
Keyakinan keliru bahwa sampel kecil mencerminkan populasi; peringkat "terbaik" hampir selalu dihuni yang sampelnya paling sedikit.
Confounding variableConfounder · Variabel perancu · Lurking variable
Variabel tersembunyi yang memengaruhi X dan Y sekaligus sehingga hubungan keduanya terlihat padahal semu.
Teorema BayesBayes' theorem · Probabilitas bersyarat · Update keyakinan
Rumus memperbarui keyakinan saat bukti baru datang: gabungkan keyakinan awal (prior) dengan kekuatan bukti (likelihood) menjadi keyakinan akhir (posterior).
Hukum GoodhartGoodhart's law · Metrik jadi target · Gaming the metric
Saat sebuah ukuran dijadikan target, ia berhenti menjadi ukuran yang baik — orang mengoptimalkan angkanya, bukan tujuannya (misalnya CS menutup tiket cepat asal-asalan demi FRT).
Sesat McNamaraMcNamara fallacy · Mengukur yang mudah · Quantitative fallacy
Mengambil keputusan hanya dari yang gampang diukur dan mengabaikan yang penting tapi sulit diukur (kepercayaan, brand, moral tim) — warisan menteri yang mengukur perang Vietnam dari body count.
Hukum BenfordBenford's law · Digit pertama · Uji fraud digit
Di banyak data alami, angka berawalan 1 muncul ~30% dan awalan 9 cuma ~5% — data karangan manusia biasanya terlalu "rata" dan gagal uji ini, sehingga dipakai mendeteksi fraud.
Paradoks BerksonBerkson's paradox · Collider bias · Bias seleksi
Dua hal yang tidak berhubungan bisa terlihat berhubungan (bahkan negatif) setelah datanya disaring syarat tertentu — misalnya di antara pasien rawat inap, dua penyakit independen terlihat "saling menghindari".
Sesat ekologisEcological fallacy · Agregat vs individu
Menyimpulkan perilaku individu dari data agregat — misalnya kota dengan rata-rata income tinggi belum tentu berisi pembeli premium (bisa jadi ketimpangan ekstrem).
Cherry pickingPilih-pilih data · Texas sharpshooter · HARKing
Memilih hanya data/segmen/periode yang mendukung kesimpulan lalu membuang yang tidak — seperti menembak dulu baru menggambar target di sekitar lubang peluru (Texas sharpshooter).
Bias konfirmasiConfirmation bias · Motivated reasoning
Kecenderungan mencari dan menafsir data agar sesuai keyakinan awal ("kampanye pasti berhasil") sambil mengabaikan bukti sebaliknya.
Sesat penjudi (gambler's fallacy)Gambler's fallacy · Monte Carlo fallacy · Hot hand
Keyakinan bahwa setelah rentetan hasil satu arah, hasil berlawanan "sudah waktunya" — padahal tiap kejadian independen tetap berpeluang sama (kasino Monte Carlo 1913: hitam keluar 26 kali berturut-turut).
Regression discontinuity (RDD)RDD · Ambang batas · Cutoff causal
Memanfaatkan ambang aturan (misalnya gratis ongkir min. 100rb) untuk kausalitas: yang tepat di atas vs tepat di bawah ambang hampir identik, jadi selisihnya ≈ efek perlakuan.