Paradoks Simpson

Paradoks Simpson

• Paradoks Simpson adalah fenomena dalam probabilitas dan statistik di mana suatu tren muncul dalam data dari beberapa kelompok, tetapi ketika kelompok-kelompok tersebut digabungkan, trennya menghilang atau berbalik.
• Hasil ini sering ditemukan dalam ilmu sosial dan statistik medis, dan menjadi masalah khususnya ketika data frekuensi diberi interpretasi kausal secara tidak semestinya.
• Dalam pemodelan statistik, paradoks ini dapat diselesaikan dengan menangani variabel perancu dan hubungan kausal secara tepat.

Contoh

Bias gender di UC Berkeley

• Dalam statistik penerimaan pascasarjana UC Berkeley pada musim gugur 1973, terlihat bahwa laki-laki memiliki kemungkinan diterima lebih tinggi daripada perempuan.
• Namun, jika informasi penerimaan per departemen dipertimbangkan, terlihat bahwa perempuan cenderung melamar ke departemen yang persaingannya lebih ketat, sementara laki-laki cenderung melamar ke departemen yang persaingannya relatif lebih longgar.
• Setelah data keseluruhan dikoreksi, muncul "bias yang sedikit menguntungkan perempuan dan signifikan secara statistik".

Pengobatan batu ginjal

• Contoh yang berasal dari penelitian medis nyata yang membandingkan tingkat keberhasilan dua metode pengobatan untuk batu ginjal.
• Baik pada batu berukuran kecil maupun besar, pengobatan A lebih efektif, tetapi ketika kedua ukuran dipertimbangkan bersama, pengobatan B tampak lebih efektif.
• Paradoks ini disebabkan oleh variabel tersembunyi berupa ukuran batu, dan muncul ketika variabel ini tidak diperhitungkan.

Rata-rata pukulan

• Paradoks Simpson dapat muncul saat membandingkan rata-rata pukulan pemain bisbol profesional.
• Seorang pemain dapat memiliki rata-rata pukulan yang lebih tinggi daripada pemain lain selama beberapa tahun, tetapi ketika tahun-tahun tersebut digabungkan, ia bisa memiliki rata-rata pukulan yang lebih rendah.

Kritik

• Ada kritik bahwa Paradoks Simpson sebenarnya bukan paradoks, melainkan masalah yang timbul karena hubungan kausal antarvariabel tidak dipertimbangkan dengan benar.
• Jika data diklasifikasikan secara berbeda atau variabel perancu lain dipertimbangkan, fenomena ini dapat menghilang atau berbalik.
• Ada juga pendapat bahwa fokus pada Paradoks Simpson dapat mengalihkan perhatian dari masalah-masalah lain yang lebih penting dan perlu diwaspadai dalam analisis statistik.

Opini GN⁺

• Paradoks Simpson memberikan pelajaran penting dalam analisis data dan inferensi statistik. Paradoks ini menekankan bahwa saat menafsirkan data, yang penting bukan hanya membandingkan angka secara sederhana, tetapi juga memahami hubungan antarvariabel dan konteks situasinya.
• Paradoks ini mengingatkan ilmuwan data dan peneliti bahwa saat menganalisis data, mereka perlu mengidentifikasi variabel perancu dan menggunakan metode statistik yang tepat untuk memperjelas hubungan kausal.
• Paradoks Simpson dapat digunakan sebagai contoh yang menekankan pentingnya teknik analisis data untuk mencegah salah tafsir data dan menghasilkan kesimpulan yang lebih akurat.
• Dalam pendidikan ilmu data, Paradoks Simpson dapat dimanfaatkan sebagai alat pembelajaran penting, dan membantu meningkatkan kesadaran akan potensi kesalahan yang dapat muncul saat menafsirkan set data yang kompleks.
• Metodologi statistik yang dapat membantu memahami dan menyelesaikan paradoks ini mencakup analisis multivariat, regresi logistik, dan model inferensi kausal; metode-metode ini penting bagi analis data untuk memecahkan masalah di dunia nyata.

[GN⁺]

Komentar Hacker News

• Seorang analis data mengalami kasus saat bekerja di perusahaan e-commerce The Hut Group, ketika biaya pemasaran dilaporkan menurun, padahal sebenarnya hampir dua kali lipat meningkat.

  • Tim pemasaran melaporkan bahwa biaya pemasaran menurun untuk tiap kategori produk, tetapi karena porsi penjualan kategori suplemen nutrisi meningkat tajam, rasio biaya pemasaran secara keseluruhan naik.
  • Ini menjadi kesempatan untuk menjelaskan paradoks Yule Simpson, yang menunjukkan perbedaan antara kinerja individual dan hasil keseluruhan.

• Matematikawan Jordan Ellenberg berpendapat bahwa paradoks Simpson sebenarnya bukan kontradiksi, melainkan tentang dua sudut pandang berbeda dalam melihat data.

  • Ini adalah metode analisis penting dalam analisis data yang mempertimbangkan bagian dan keseluruhan secara bersamaan.

• Seorang pengajar statistik menggunakan data harga rumah di Amerika Serikat untuk menjelaskan paradoks Simpson.

  • Rata-rata harga rumah tanpa pendingin udara sentral terlihat lebih tinggi daripada rumah yang memilikinya, tetapi jika dibagi per negara bagian, hubungan itu justru terbalik.
  • Ini adalah akibat rumah-rumah mahal di California mendorong naik harga rata-rata.

• Kita juga perlu menyadari adanya paradoks Berkson.

  • Ini menjelaskan bahwa kesalahan dapat terjadi pada kumpulan data yang terbentuk dengan cara yang bias.

• Animasi singkat di halaman wiki tentang paradoks Simpson adalah contoh yang bagus untuk membantu pemahaman.

• Baru-baru ini diketahui bahwa paradoks Simpson memberikan pelajaran tentang inferensi kausal.

  • Jika paradigma yang tepat diterapkan, paradoks tersebut terselesaikan.

• Paradoks Lord sangat erat kaitannya dengan paradoks Simpson dan mudah dipahami secara visual.

  • Dengan contoh hubungan antara dosis obat dan durasi tidur, garis regresi data individual dan data keseluruhan menunjukkan hasil yang berbeda.

• Ada yang sempat salah mengira paradoks Simpson sebenarnya mirip dengan sebuah adegan dari episode "The Simpsons", tetapi ini mungkin merupakan kemiripan yang disengaja oleh para penulis Simpsons di akhir 1990-an.

• Setelah membaca kasus dalam proses penerimaan mahasiswa UC Berkeley yang tampak memiliki bias gender, ditemukan bahwa perempuan dan laki-laki cenderung mendaftar ke jurusan yang sangat kompetitif dan yang tidak, secara berbeda.

  • Ini berlawanan dengan situasi di Australia, dan bertolak belakang dengan dugaan umum bahwa jurusan seni biasanya lebih mudah dimasuki daripada jurusan STEM.

• Visualisasi di wiki sangat efektif sehingga paradoksnya bisa dipahami tanpa penjelasan tambahan.