Ecosia dan Qwant bekerja sama membangun indeks pencarian Eropa

• Ecosia dan Qwant membuat indeks pencarian mereka sendiri melalui European Search Perspective, dengan tujuan meningkatkan kemandirian teknologi pencarian Eropa
• Indeks pencarian adalah basis data yang digunakan mesin pencari untuk menemukan informasi dan menampilkannya berdasarkan urutan relevansi, sehingga sangat menentukan kualitas hasil dan kendali atasnya
• Ecosia saat ini menggunakan indeks Google dan Bing secara bersamaan, tetapi mulai 2025 akan menambahkan indeks baru ke kumpulan basis data hasil pencariannya
• Penerapan awal akan dimulai dari hasil pencarian bahasa Prancis dan Jerman yang disesuaikan dengan negara asal Qwant dan Ecosia, dalam skala kecil untuk validasi
• Indeks baru ini menargetkan kedaulatan digital, pencarian yang mengutamakan privasi, serta kumpulan data yang transparan dan aman untuk infrastruktur AI, dan direncanakan agar juga dapat dimanfaatkan pihak luar

---

Apa yang ingin dicapai European Search Perspective

• Ecosia membangun European Search Perspective bersama Qwant
• Pekerjaan intinya adalah membuat indeks pencarian sendiri, yang ke depannya dapat dimanfaatkan sebagai fondasi teknologi termasuk untuk infrastruktur AI
• Inisiatif ini juga bersinggungan dengan aktivitas terkait Digital Markets Act, dan mengarah pada ekosistem teknologi yang lebih adil, kompetitif, dan demokratis

Cara penerapan indeks pencarian

• Indeks pencarian adalah basis data yang digunakan mesin pencari untuk mengambil informasi dan menampilkannya dalam urutan yang paling relevan
• Saat ini Ecosia menggunakan indeks Google dan Bing secara bersamaan untuk menjawab pencarian pengguna
• Mulai 2025, indeks baru akan ditambahkan ke kumpulan basis data untuk penyajian hasil pencarian
  • Bahasa sasaran awal adalah bahasa Prancis dan Jerman
  • Dimulai dalam skala kecil di negara asal Qwant dan Ecosia
• European Search Perspective bertujuan meningkatkan kedaulatan digital di Eropa dan menyediakan kumpulan data yang transparan serta aman yang dibutuhkan teknologi AI yang sedang berkembang
• Ini dikembangkan sebagai indeks pencarian yang mengutamakan privasi yang digunakan bersama oleh Ecosia dan Qwant, dan tidak seperti solusi tertutup, direncanakan agar bisa digunakan juga di tempat lain
• Ecosia memandang kualitas mesin pencari terkait dengan kemampuannya menciptakan dampak iklim, dan melihat pengembangan teknologi ini sebagai elemen kunci bagi masa depan teknologi ramah lingkungan

[GN⁺]

Pendapat Hacker News

• Qwant perlu dilihat dengan cukup hati-hati
  Mereka menerima investasi besar dari Axel Springer (Bild, Die Welt), dan besar kemungkinan suatu saat penerbit itu akan menginginkan imbalan atas investasinya
  Kalau arahnya seperti Cliqz/Hubert Burda (penerbit besar Jerman lainnya), privasi bisa ditafsirkan ulang sebagai “mengecualikan perusahaan Amerika”, sementara berbagi data dengan penerbit Jerman dianggap tidak apa-apa. Narasinya: mereka jelas ada di pihak yang baik dan kita diminta percaya bahwa mereka akan menangani data secara bertanggung jawab
  Ecosia sekilas terlihat jauh lebih baik. Tidak ada koneksi mencolok dengan media tradisional dan mereka juga tidak menyembunyikan kecenderungan politiknya. Namun saya ragu apakah mereka menguntungkan, dan ingin memastikan uangnya sebenarnya berasal dari mana

  • Axel Springer-Verlag bukan pihak yang bisa dianggap enteng, dan menerima uang dari mereka kurang lebih seperti membuat kesepakatan dengan iblis
    Mereka menguasai kanal berita hampir di seluruh spektrum, dari kelas pekerja berpenghasilan rendah hingga kelas menengah atas, dan tidak ragu menyuntikkan sudut pandang politik yang ingin disebarkan Mathias Döpfner melalui kanal-kanal itu
    Di Jerman tidak ada yang sebanding, tetapi di Amerika mungkin ini hanya level biasa
  • Qwant terkenal di Prancis karena membuat janji besar lalu berulang kali gagal memenuhinya
    Selama lama sekali pada dasarnya mereka hanyalah wrapper Bing, tetapi mengklaim bukan demikian
  • Ecosia adalah organisasi nirlaba, jadi menghasilkan laba memang bukan tujuannya
    Mereka mempublikasikan pengeluaran dan donasi setiap bulan, dan pada Januari mereka menghasilkan sekitar 4 juta euro, jadi menurut saya mereka cukup berhasil untuk hal yang ingin mereka lakukan
  • Saya membacanya sebagai “Cliqz mengumpulkan data seperti perusahaan-perusahaan Amerika”, tetapi akan bagus kalau diperjelas perusahaan mana dan data apa yang dimaksud
    Sebagai catatan, saya pernah bekerja di Cliqz
  • Saat ini sebagian besar pencarian web saya lakukan dengan Brave Search, atau di Google dengan menambahkan “... Reddit” setelah kata kunci
    Berdasarkan pengalaman yang belum terlalu lama, Qwant terasa sedikit lebih buruk daripada Google

• Sementara itu, GOOD Search yang berbasis di Jerman bisa menjadi alternatif
  Mereka memakai indeks pencarian independen milik Brave, dan menurut [1], indeks itu juga sebagian besar dikembangkan di Jerman
  [0] https://good-search.org/
  [1] https://en.reset.org/the-good-search-engine-web-search-witho...

  • Feed pencarian Brave sangat bergantung pada pekerjaan dasar Cliqz, startup Jerman berbasis di München, dan teknologi itu menjadi fondasi Brave Search
    GOOD Search, sebagai perusahaan bertujuan khusus di Jerman, berupaya bekerja sama dengan teknologi-teknologi independen terbaik dan saat ini berfokus pada Brave Search
    Kami juga bisa mengakses Mojeek yang berbasis di Inggris, dan sedang berhubungan dengan startup Qwant/Ecosia. Mereka kemungkinan akan menyiapkan feed pencarian independen berbahasa Prancis sekitar pertengahan 2025, dan bahasa Jerman mungkin sekitar awal 2026
    Andreas, salah satu pendiri GOOD Search
  • Yandex juga cukup bagus. Mereka punya indeks sendiri, dan untuk pencarian terkait politik jauh lebih baik daripada Google
    Asalkan bukan berita terbaru, dan mereka juga pandai menemukan berbagai jenis situs torrent
  • Kalau ingin menghindari iklan, masuk akal untuk membayar layanan, jadi saya sempat berpikir pindah ke Kagi, tetapi di saat yang sama saya juga ingin mengurangi ketergantungan pada perusahaan Amerika
    GOOD mengenakan biaya 2 euro per bulan untuk pencarian tanpa batas, dan saya penasaran mengapa biayanya jauh lebih rendah daripada Kagi. Mungkin harga indeks Brave jauh lebih murah daripada membuat indeks sendiri

• Ini kabar baik. Saat ini Eropa jelas punya alasan untuk mengurangi ketergantungan pada teknologi dan produk Amerika, tetapi terlepas dari itu pun, bertambah besarnya dunia yang sempit bernama indeks pencarian adalah hal positif
  Sepertinya tidak terlalu kontroversial kalau dikatakan pencarian belakangan ini agak stagnan, dan dengan lebih banyak persaingan semoga ada perbaikan untuk semua orang

• Bagus sekali. Malah sudah terlambat
  Saya berharap kolaborasi berbasis Eropa semacam ini bertambah di semua bidang

  • Sepertinya berita yang sama sudah pernah muncul mungkin 6 bulan lalu
    Saat diluncurkan, Qwant performanya sangat bagus dan bahkan punya “lite.qwant.com” yang indah seperti DuckDuckGo lite, tetapi akhirnya mereka membuangnya dan membuat beranda menjadi berat
    Ecosia dulu juga lebih sederhana dan cepat, tetapi sekarang terasa seperti melihat situs web buku bergambar anak-anak dan iklannya juga makin banyak
    Pada akhirnya keduanya mungkin akan bekerja sama untuk membuat generasi berikutnya dari Yahoo! lama, lalu gagal

• Saya pikir bentuk seperti ini bisa menjadi masa depan pencarian web
  Mesin pencari terbuka atau semi-terbuka berkumpul bersama untuk menyediakan pengalaman pencarian yang terbuka dan gratis melalui sumber/indeks bersama. Akan bagus kalau DDG dan Brave juga ikut langsung
  Layanan seperti Kagi juga bagus, tetapi paling banter mereka bisa menjadi penyedia premium yang membuat setelan khusus di jalan mahal di kota yang sangat mahal. Menurut saya pencarian umum bukanlah sesuatu yang bersifat seperti itu

  • Saya memakai Kagi dan sangat puas. Belakangan ini, setiap kali saya jarang harus kembali ke Google, saya terkejut melihat rasio signal-to-noise yang buruk
    Bisnis Kagi juga menarik untuk diamati. Menurut saya di pasar selalu ada ruang bagi perusahaan yang tidak berambisi menguasai dunia di suatu bidang, tetapi sekadar menjalankan pekerjaannya dengan cukup baik sebagai bisnis yang berkelanjutan
    Kagi tidak perlu menjadi “pembunuh Google”; cukup bekerja dengan baik sehingga orang seperti saya puas membayar dan puas dengan apa yang diterima
    Kagi mencapai profitabilitas pada 2024, setelah 2 tahun beroperasi, padahal biaya saat ini untuk memakai indeks Google mungkin cukup besar. Bahkan jika tetap menjadi bisnis niche, selama terus tumbuh (saat ini 41 ribu anggota [0]), itu sudah sangat cocok bagi orang-orang seperti saya
    Tidak perlu menjadi “pencarian umum”; cukup bagus sampai orang mau membayar
    [0] https://kagi.com/stats
  • Saya tidak mengerti mengapa harus begitu
    Upaya seperti ini sudah ada puluhan kali, dan semuanya gagal karena tidak ada permintaan pasar nyata. Dalam sebagian besar kasus, open source bukanlah fitur
    Saya tidak melihat kebutuhan apa yang belum terpenuhi pada cukup banyak pengguna sehingga ini layak dilakukan

• Sulit untuk terlalu percaya pada layanan ramah privasi dari Prancis dan Jerman
  [1]: https://techcrunch.com/2016/08/24/encryption-under-fire-in-e...
  [2]: https://www.laquadrature.net/en/2023/06/05/criminalization-o...
  [3]: https://news.ycombinator.com/item?id=36275795

  • AS menafsirkan privasi sebagai sesuatu yang melawan pemerintah, sambil membiarkan perusahaan melakukan pelanggaran privasi tanpa batas
    Pada praktiknya, lewat jalur itu pelanggaran privasi oleh badan intelijen juga menjadi cukup banyak dimungkinkan
    UE, alih-alih menangani pelanggaran privasi oleh perusahaan, punya kompromi dalam hal privasi penegakan hukum
  • Itu adalah usulan undang-undang, dan layanan AS setidaknya sejak Patriot Act menjadi lebih sulit dipercaya
    Melihat tindakan AS, bahkan jika Eropa tidak peduli soal enkripsi dan hanya menginginkan layanan yang stabil, dapat dipercaya, serta tidak tiba-tiba disalahgunakan untuk tujuan geopolitik, ada pilihan yang lebih baik daripada memilih layanan AS
  • Undang-undang itu tidak disahkan, tetapi undang-undang seperti Cloud Act di AS disahkan
  • Kalau tidak bisa percaya karena rancangan undang-undang anti-privasi yang bahkan tidak disahkan di Prancis dan Jerman, saya penasaran siapa yang bisa dipercaya

• Saya penasaran apakah ada yang tahu indeks pencarian AAAA atau mesin pencari untuk digunakan di jaringan khusus IPv6
  Mesin pencari yang saat ini bisa diakses lewat IPv6 mengembalikan terlalu banyak hasil yang tidak dapat dijangkau

• Saya membayar untuk memakai Kagi, dan kalau ada alternatif kedaulatan Eropa, saya tidak keberatan membayar jumlah yang sama

• Bagus
  Saya penasaran bagaimana Ecosia/Qwant dibandingkan dengan Kagi. Saya sudah puas memakai Kagi selama beberapa tahun, tetapi belakangan mendukung alternatif di luar AS juga tampaknya bukan hal buruk

  • Sebelum Kagi, saya cukup lama memakai Qwant sebagai pencarian default, dan hasilnya jauh lebih baik daripada DDG
    Qwant sudah cukup lama memiliki indeks sendiri, dan seingat saya jika hasilnya terlalu sedikit, mereka melengkapinya dengan Bing. Ecosia pada dasarnya hanya mirip Bing, dan hampir hanya itu saja
    Di Qwant, mungkin perlu menulis kueri pencarian sedikit berbeda. Bentuk kata kunci gaya lama seperti “bike chain roller standard size” lebih cocok daripada bentuk pertanyaan seperti “what is the standard bike chain size”, dan secara pribadi saya menganggap itu cara yang benar
    Pengaturan penyetelan detailnya sangat terbatas, tetapi secara keseluruhan hasilnya sangat bagus
  • Saat mencoba mengakses Qwant, muncul “Unfortunately we are not yet available in your country”
    Saya mengakses dari Brasil, dan rasanya saya belum pernah melihat pesan seperti ini dari mesin pencari
  • mojeek.com terasa lebih baik daripada keduanya tetapi sedikit di bawah Google, dan kira-kira setara dengan Bing
    Bing menjangkau lebih jauh, tetapi kualitasnya lebih buruk

• Akan bagus jika ada indeks pencarian terbuka yang URL dan atribut crawling-nya dibagikan dengan pihak lain
  Dengan begitu, pemain kecil atau peneliti juga bisa membuat penyimpanan lokal sendiri dengan hanya melakukan crawling ulang pada situs-situs yang menjanjikan. Ini adalah bentuk web secara keseluruhan yang difilter pada hal-hal yang kemungkinan besar berguna dan aman bagi banyak orang, yaitu bebas malware
  Jika perlu biaya, itu bisa menjadi produk komersial dengan harga berdasarkan ukuran organisasi. Jika hasil riset bersifat nonkomersial atau berlisensi permisif, berikan gratis kepada peneliti, dan selain itu beri diskon. Saya membayangkan pendekatan seperti penetapan harga Windows untuk personal/server yang menyeimbangkan profitabilitas dan akses luas
  Dengan begitu, dataset seperti RefinedWeb bisa dibuat ulang tanpa melanggar undang-undang hak cipta. Tentu saja ketentuan layanan, hukum kontrak, dan sebagainya masih perlu dipertimbangkan. Untuk crawling bagi penggunaan internal, terutama penggunaan nonkomersial, ada argumen pembelaan hukum yang lebih kuat. Menghilangkan masalah hak cipta saja sudah sangat membantu

  • https://commoncrawl.org/
  • Saya melihat ada beberapa masalah dengan susunan seperti itu
    Jika ada indeks perantara, keleluasaan pembuat konten untuk menentukan siapa yang diizinkan atau diblokir melakukan crawling akan berkurang. Namun saat ini penggunaan konten untuk AI sudah begitu terang-terangan sehingga mungkin tidak terlalu berarti
    Kesegaran konten juga menjadi masalah. Ukuran data bisa menjadi sangat besar, dan beberapa halaman perlu diperbarui lebih sering daripada halaman lain. Setiap pengguna indeks juga bisa memiliki kumpulan halaman yang diminati berbeda, dan siapa yang memutuskan itu menjadi tidak jelas
    Konten tersentralisasi seperti Reddit juga menjadi masalah. Mereka sudah secara agresif memblokir sebagian besar bot agar tidak bisa melakukan crawling konten. Perlu melakukan crawling banyak halaman per hari, dan pada akhirnya kemungkinan besar akan diblokir. Biasanya hanya sebagian bot yang mendapat perlakuan khusus untuk crawling lebih agresif