Web scraping untuk saya, tetapi bukan untuk Anda

• Artikel tentang kompleksitas hukum dan kemunafikan seputar web scraping
• Cara perusahaan besar seperti Meta dan Microsoft melarang web scraping di platform mereka sendiri sambil pada saat yang sama mengumpulkan data dari platform perusahaan lain
• Kompleksitas persoalan hukum mengenai akses dan penggunaan data di internet serta tujuan penggunaannya. Ada bentuk data yang dilindungi hak cipta atau hak kekayaan intelektual lainnya, tetapi sebagian besar data di internet tidak mudah dilindungi
• Perusahaan media sosial seperti LinkedIn dan Facebook paling agresif mengejar gugatan terkait web scraping. Namun, konten yang mereka coba lindungi dibuat oleh pengguna dan bukan milik mereka sendiri
• Pada awal internet, perusahaan menggunakan teori hukum untuk menghentikan web scraping sebagai bentuk pelanggaran terhadap properti. Artinya, mereka berargumen bahwa permintaan data massal yang tidak diinginkan merupakan bentuk pelanggaran terhadap properti fisik pribadi, yaitu server komputer
• Dari awal 2000-an hingga 2017, Computer Fraud and Abuse Act (CFAA) adalah teori hukum utama untuk mencegah web scraping. CFAA melarang akses tanpa otorisasi ke "komputer yang dilindungi"
• Dalam perkara hiQ Labs, Inc. v. LinkedIn Corp. pada 2017, hak web scraper untuk mengakses data LinkedIn yang bersifat publik berdasarkan CFAA ditegaskan, dan banyak orang kemudian menafsirkannya sebagai hak positif untuk melakukan scraping atas data publik
• Saat ini, cara utama untuk menghentikan web scraping adalah melalui klaim pelanggaran kontrak. Hal ini memungkinkan perusahaan mengklaim hak kepemilikan atas penggunaan dan akses data melalui hukum kontrak
• Perpindahan dari hukum properti ke hukum kontrak memungkinkan pemilik situs web mendefinisikan hak atas data online melalui syarat dan ketentuan penggunaan online
• Artikel ini menyoroti kemunafikan perusahaan seperti Microsoft. Baru-baru ini mereka memperbarui syarat penggunaan untuk melarang scraping terhadap layanan AI, tetapi afiliasi mereka, OpenAI, meluncurkan produk yang dirancang untuk melakukan scraping atas seluruh internet
• Penulis mengecam pengadilan karena mengizinkan perusahaan swasta menciptakan hak kekayaan intelektual melalui kontrak adhesi, dan berargumen bahwa keputusan semacam ini seharusnya menjadi persoalan kepentingan publik
• Artikel ini menyarankan bahwa rezim hukum web scraping saat ini akan diuji oleh kasus-kasus AI generatif, bahwa konsistensi hukum tidak akan dapat dipertahankan, dan memprediksi akan ada perkembangan hukum penting dalam beberapa tahun ke depan

[GN⁺]

Opini Hacker News

• Persaingan AI dan LLM belakangan ini meningkatkan kekhawatiran tentang web scraping, dan tokoh serta perusahaan teknologi besar memperkuat pertahanan mereka terhadap ancaman yang mereka rasakan.
• Untuk meredakan ketakutan seputar scraping data, diperlukan penafsiran hak cipta baru untuk aplikasi AI komersial.
• Kasus HiQ vs LinkedIn sering dikutip dalam diskusi tentang web scraping, tetapi rincian kasusnya rumit dan sering diabaikan.
• Kemunafikan yang dianggap ada pada perusahaan-perusahaan yang melakukan scraping data sambil melarang scraping atas data mereka sendiri dapat dipahami sebagai strategi persaingan, bukan kontradiksi.
• Pergeseran dari hukum properti ke hukum kontrak memungkinkan pemilik situs web mendefinisikan hak mereka sendiri, yang menyebabkan menjamurnya "kontrak" sepihak dari perusahaan-perusahaan besar.
• Contoh terbaru tentang Microsoft yang melarang scraping sambil meluncurkan produk yang dirancang untuk melakukan scraping internet disebut sebagai contoh kemunafikan korporat.
• Web scraping dipandang sebagai persoalan model bisnis, terutama karena skalanya, dan penyedia konten gratis yang bergantung pada pendapatan iklan terancam oleh scraping yang melewati iklan.
• Kepemilikan konten buatan pengguna di platform seperti Facebook bersifat kompleks, dan pengguna tetap mempertahankan kepemilikan sambil memberikan hak penggunaan yang luas kepada platform.
• Hambatan hukum terhadap web scraping umumnya dianggap merugikan, tetapi ada juga individu yang mengalami dampak negatif dari scraping, seperti email spam.