Studi dan Evaluasi Empiris terhadap CAPTCHA Modern

 (arxiv.org)
1 poin oleh GN⁺ 2023-12-18 | 1 komentar | Bagikan ke WhatsApp

Studi dan Evaluasi Empiris terhadap CAPTCHA Modern

  • CAPTCHA telah digunakan secara luas selama sekitar 20 tahun sebagai sarana perlindungan dari bot.

  • Seiring berkembangnya teknik untuk melumpuhkan atau melewati CAPTCHA, CAPTCHA juga berevolusi dalam hal kompleksitas dan keragaman sehingga menjadi sulit diselesaikan baik oleh bot maupun manusia.

  • Penting untuk menyelidiki berapa lama waktu yang dibutuhkan untuk menyelesaikan CAPTCHA modern dan bagaimana pengguna memandangnya.

  • Studi ini mengevaluasi kinerja penyelesaian dan persepsi pengguna terhadap CAPTCHA yang saat ini digunakan tanpa modifikasi.

  • Data diperoleh melalui inspeksi manual terhadap situs web populer dan studi pengguna di mana 1.400 peserta menyelesaikan 14.000 CAPTCHA.

  • Terdapat perbedaan penting yang cukup mengejutkan antara jenis CAPTCHA paling populer, di mana waktu penyelesaian dan persepsi pengguna tidak selalu sejalan.

  • Untuk menyelidiki pengaruh konteks eksperimental, dilakukan studi perbandingan. Secara khusus, diteliti perbedaan antara menyelesaikan CAPTCHA secara langsung dan menyelesaikannya sebagai bagian dari tugas yang lebih alami seperti pembuatan akun.

  • Meskipun ada beberapa faktor pembaur potensial, hasilnya menunjukkan bahwa konteks eksperimental dapat memengaruhi tugas ini dan perlu dipertimbangkan dalam penelitian CAPTCHA di masa depan.

  • Dengan menganalisis peserta yang memulai tugas tetapi tidak menyelesaikannya, studi ini meneliti pengabaian tugas pengguna yang disebabkan oleh CAPTCHA.

Pendapat GN⁺

  • Studi ini memberikan wawasan penting tentang dampak CAPTCHA terhadap pengalaman pengguna dan efektivitasnya. Data tentang seberapa cepat dan akurat pengguna menyelesaikan CAPTCHA, serta bagaimana mereka memandangnya, sangat berguna bagi pengembang web dan profesional keamanan.
  • Temuan bahwa konteks eksperimental dapat memengaruhi kemampuan pengguna dalam menyelesaikan CAPTCHA merupakan pertimbangan penting saat merancang situs web nyata, terutama ketika mempertimbangkan antarmuka pengguna dan interaksi.
  • Pengabaian tugas akibat CAPTCHA dapat secara langsung memengaruhi tingkat konversi situs web dan kepuasan pengguna, sehingga studi ini memberikan tolok ukur penting dalam mengembangkan metode autentikasi yang ramah pengguna.

Bacaan terkait

1 komentar

 
GN⁺ 2023-12-18
Komentar Hacker News
  • CAPTCHA Google dirancang dan diterapkan untuk melatih kecerdasan buatan (AI). Karena itu, tidak mengherankan jika AI menjadi mampu menyelesaikannya dengan baik.
  • Penelitian ini membahas bagaimana manusia menyelesaikan CAPTCHA, dan tidak ditemukan isi yang menyatakan bahwa AI lebih unggul daripada manusia.
  • CAPTCHA modern bekerja bukan hanya sebagai teka-teki gambar sederhana, tetapi juga melalui analisis perilaku pengguna. Bagi kebanyakan orang, cukup dengan mengklik kotaknya saja.
  • AI yang dirancang untuk memecahkan CAPTCHA tidak menggunakan data dari Google dan pihak lain sebagai data pelatihan. Bisa dibayangkan bahwa Google melatih botnya sendiri, tetapi itu tidak pasti.
  • Pengguna mungkin lebih memilih pembayaran kecil daripada harus menyelesaikan CAPTCHA, terutama untuk menghindari proses membosankan seperti memilih sepeda.
  • Hacker News (HN) menangani 5 juta pengunjung per bulan dan 10 juta tayangan per hari tanpa CAPTCHA, dengan menggunakan alat pertahanan dasar yang telah terbukti dan pembatasan laju.
  • Judulnya menyesatkan, dan judul serta abstrak penelitian yang sebenarnya tidak menyebutkan bahwa AI "saat ini" lebih unggul daripada manusia.
  • CAPTCHA adalah faktor yang membuat pengguna menyerah pada tugas, terutama karena kegagalan pemuatan atau ambiguitas, sehingga berdampak negatif pada pengalaman pengguna.
  • Ada prediksi bahwa jika CAPTCHA menjadi begitu sulit hingga hanya AI yang bisa menyelesaikannya, manusia akan sepenuhnya tersingkir dari internet.
  • Judul yang diajukan adalah "Bot AI kini lebih unggul daripada manusia dalam menyelesaikan CAPTCHA", tetapi ini melanggar aturan judul Hacker News. Judul asli seharusnya digunakan, dan opini dibagikan di komentar.
  • Operator bot sudah bisa mempekerjakan pemecah CAPTCHA manusia, dan jika digantikan oleh AI, biaya operator bot akan menurun. Akibatnya, operator situs web akan memakai CAPTCHA yang lebih sulit, dan pada akhirnya pengguna bisa saja menolak untuk menyelesaikannya.
  • CAPTCHA terbaru (teka-teki memutar objek atau menemukan item yang cocok) lebih disukai dibanding CAPTCHA berbasis teks pada masa lalu.