Pemetaan Hacker News untuk Menemukan Siapa yang Tahu Apa di Komunitas HN

40 million embeddings to find who knows what on Hacker News

Latar belakang proyek

• Dalam postingan sebelumnya, 40 juta postingan dan komentar di Hacker News diubah menjadi embedding untuk membuat peta semantik komunitas
• Ditemukan bahwa komunitas mendukung proyek ini, dan melalui berbagai usulan dari mereka, peta tersebut dengan cepat menyempit menjadi relasi nyata di seluruh dunia
• Melalui percakapan dengan Robert, dibahas pekerjaannya membangun algoritme makna sosial pada 2008
• Mengejutkan bahwa bahkan setelah 16 tahun, jejaring sosial seperti Hacker News masih belum menghitung dan menampilkan suara-suara tepercaya untuk tiap topik

Pertanyaan utama

• Mengapa sulit menemukan dan menelusuri orang-orang yang paling paham tentang topik tertentu?
• Bagaimana cakupan pengetahuan mereka dan hubungan mereka dengan orang-orang yang memiliki pemikiran serupa?

Fitur baru aplikasi

• Melalui aplikasi baru, peta semantik Hacker News dapat dijelajahi dan diinteraksikan (hn2.wilsonl.in)

Hal-hal menarik yang ditemukan

• Pengorganisasian semantik pengguna: Menunjukkan kontribusi HN secara semantik, dimulai dari pengguna lalu bersama pengguna lain yang serupa
  • Contoh: lihat profil baru robg
• Pencarian semantik: Dapat menelusuri makna di HN berdasarkan siapa yang tahu apa
  • Contoh kueri: startup, pemrograman Go vs Rust, neurosains dan tidur, pemasaran email
• Pemetaan komunitas: Dapat memetakan komunitas berdasarkan makna yang terkait dengan siapa yang tahu apa
  • Karena pengetahuan tidak tersebar merata, topografi komunitas dapat digunakan untuk menyoroti orang-orang dan hal-hal yang mereka ketahui

Potensi teknologi

• Dengan menggabungkan tiga fungsi—mengorganisasi makna, menelusuri, dan memetakan komunitas—kita bisa melihat orang-orang di balik kata-kata
• Alih-alih mengorganisasi informasi dunia, kita bisa mengorganisasi orang-orang di dunia
• Ini mendorong pemikiran tentang berbagai tantangan pengetahuan sosial
• Siapa pun yang ingin ikut menjelajah seiring proyek ini makin berkembang dianjurkan untuk bergabung ke daftar tunggu

Ringkasan GN⁺

• Proyek ini menawarkan cara untuk menemukan dan menelusuri para ahli pada topik tertentu melalui peta semantik komunitas Hacker News
• Kontribusi pengguna dianalisis secara semantik untuk memvisualisasikan hubungan mereka dengan pengguna serupa
• Fitur pencarian memudahkan menemukan orang-orang yang memiliki pengetahuan tentang topik tertentu
• Topografi komunitas menyoroti orang-orang dan hal-hal yang mereka ketahui
• Proyek ini menawarkan cara baru untuk menghubungkan orang dan berbagi pengetahuan

[GN⁺]

Komentar Hacker News

• Saya suka bahwa HN berfokus pada konten dan diskusi, bukan pada pengguna individu

  • Jika saya ingin mengikuti para ahli, saya akan menggunakan jejaring sosial seperti Mastodon atau feed RSS
  • Alat ini cenderung memilih pemberi komentar yang aktif daripada pakar yang berpengetahuan
  • Meski begitu, ini tetap proyek yang keren

• Nama pengguna saya diambil dari alter ego narator dalam "Zen and the Art of Motorcycle Maintenance"

  • Mencerminkan kemampuan Phædrus dalam menggunakan pisau analitis
  • Sering menggunakan kata kunci seperti "part, system, level, language, article, object"

• Diperkenalkan sebagai pakar terdepan dalam Optimizing Toilet Lid Design

• Sepertinya alat ini mengekstrak email saya dari teks profil dan menjadikannya tautan mailto:

  • Sindiran sarkastik untuk berterima kasih karena telah memudahkan pengirim spam mengumpulkan email

• Entri berjudul "Risk of COVID from pianos" disertakan di bagian bawah peta

  • Saya penasaran dari mana asalnya

• Hal terbaik tentang HN adalah komentarnya terasa sementara

  • Tidak nyaman ketika dianalisis dan dipublikasikan tanpa persetujuan
  • Tidak semuanya perlu dianalisis, dan tidak perlu dijadikan ajang persaingan
  • Saya suka fokusnya pada konten
  • Ini membuat saya menghapus handle Twitter dari bio saya

• Proyek terkait terbaru:

  • "Show HN: Exploring HN by mapping and analyzing 40M posts and comments for fun" (Mei 2024, 159 komentar)

• Beberapa tahun lalu ada alat yang sempat kontroversial

  • Itu adalah alat untuk menemukan pengguna yang mirip melalui analisis teks dan gaya
  • Katanya sangat akurat
  • Saya penasaran apakah alat ini bisa digunakan ulang untuk tujuan seperti itu
  • Tidak jelas apakah "Explore More Users" diurutkan berdasarkan kemiripan

• Sebagai pengguna yang jarang aktif, saya merasa alat ini tidak akurat

  • Sepertinya terlalu berfokus pada pertanyaan tentang jpeg xl, yang justru paling tidak saya kuasai
  • Mungkin ada bias terhadap topik yang lebih umum

• Sulit menggali lebih dalam nama pengguna saya

  • Selain menunjukkan banyak titik yang tersebar di peta, alat ini tidak memberi banyak informasi
  • Saya masih berusaha memahami apa sebenarnya keseluruhan klaster itu
  • Kebanyakan terkait android/apple/google