PhysicsForums dan teori internet mati
(hallofdreams.org)- Arsip lama komunitas sains PhysicsForums, yang dimulai pada 2001, ditemukan memuat tulisan buatan LLM yang disisipkan dengan tanggal mundur dan diatribusikan ke nama pengguna yang sudah ada
- Dengan membandingkan hubungan kenaikan monoton antara ID posting dan waktu penulisan, ditemukan pola penyisipan mundur; setelah mengecualikan pengecualian sah seperti penggabungan MathHelpBoards, sekitar 115.000 posting diperkirakan ditulis oleh LLM
- Contoh utama, akun ravenprp, dalam arsip Wayback Machine tahun 2019 hanya memiliki 74 posting, tetapi sekarang ditampilkan memiliki 2.891; sebanyak 2.817 tulisan tambahan tersebar dari sekitar sebelum pembuatan akun hingga setelah login terakhirnya
- Posting buatan LLM diperkirakan sekitar 1,6% dari seluruh posting dan sekitar 3% dari total jumlah kata, tetapi bila FAQ dan ringkasan ikut dihitung, porsi tulisan manusia di seluruh situs turun menjadi 66% dari seluruh kata
- Greg Bernhardt menjawab bahwa fitur AI dan eksperimen akun uji tidak memenuhi standar kualitas, tetapi cara menempelkan tulisan ke identitas pengguna lama tanpa persetujuan merusak kepercayaan komunitas dan integritas arsip
Nilai arsip forum sains lama
- PhysicsForums adalah komunitas sains yang dimulai Greg Bernhardt pada 2001, dengan karakter forum yang kuat sebagai tempat memberi petunjuk untuk pekerjaan rumah fisika
- Situs ini tumbuh cukup stabil hingga 2012, tetapi setelah itu perhatian bergeser ke situs terpusat seperti StackExchange, dan pada 2025 hanya tersisa komunitas kecil
- Tidak seperti banyak forum web awal lain, PhysicsForums mempertahankan URL dari 2003 hingga 2025 dan tidak menghapus posting lama atau menutup situs, sehingga tetap menjadi semacam kapsul waktu internet awal 2000-an
Tanda-tanda aneh yang terungkap dari akun ravenprp
- Akun ravenprp saat ini tampak telah menulis 2.891 posting selama 7 bulan, dari September 2006 hingga April 2007
- Rata-ratanya lebih dari 13 posting per hari, dan dari isinya ia tampak memiliki banyak identitas: dosen universitas, mahasiswa teknik mesin, perekrut pabrik kimia, insinyur struktur, biolog, fisikawan medis, kimiawan, hingga insinyur kedirgantaraan
- Sebagian posting ditandai seolah ditulis sejak 3 tahun sebelum akun dibuat hingga 1 tahun setelah login terakhir
- Bahkan ada tulisan yang bercanda tentang “model bahasa yang dikembangkan OpenAI” meski saat itu masih 7 tahun sebelum OpenAI didirikan
- Dalam arsip Wayback Machine tahun 2019, jumlah posting akun ini adalah 74, tetapi sekarang ditampilkan sebagai 2.891
- Ini menunjukkan bahwa pada suatu waktu posting kemungkinan disisipkan langsung ke basis data, sementara tanggal bergabung profil atau informasi login terakhir tampaknya tidak diperbarui sesuai perubahan itu
- Jika hanya melihat 74 posting aslinya, ravenprp lebih tampak sebagai mahasiswa teknik elektro yang bertanya soal buku MATLAB, membahas masalah IC timer 555, dan membagikan tautan Bernoulli Equation
- Pikiran dan tulisan dari 74 posting yang benar-benar ditulis manusia itu kini nyaris tertimbun oleh 2.817 tulisan tambahan pada akun yang sama
Pola penyisipan mundur yang terlihat dari ID posting
- Posting dan thread di PhysicsForums memiliki ID angka yang berurutan
- Dalam kondisi normal, ID posting yang lebih besar seharusnya memiliki waktu penulisan yang lebih belakangan
- Ada pengecualian seperti penghapusan, pemulihan, pemisahan thread, atau masalah basis data, tetapi alur besarnya seharusnya tetap meningkat secara monoton
- Pada 30.000 posting yang dikumpulkan secara acak, aturan ini tetap berlaku pada sebagian besar periode
- Salah satu pengecualian besar adalah penggabungan dengan MathHelpBoards pada 2022
- Arsip sekitar 150.000 posting digabungkan sambil mempertahankan tanggal aslinya
- Setelah mengecualikan penggabungan MathHelpBoards dan kasus yang tampak dekat dengan waktu penulisan sebenarnya, sekitar 115.000 posting diperkirakan ditulis oleh LLM lalu diatribusikan ke akun manusia
- Pengguna yang terdampak, berdasarkan sampel representatif, berjumlah setidaknya 110 orang
- Ini mencakup penulis komentar awal, penulis sekali lewat, pembaca jangka panjang, hingga pendiri sekaligus admin Greg Bernhardt
- Setiap akun jadi memuat sudut pandang yang tidak diketahui apakah pernah disetujui oleh pengguna aslinya
Masalah kualitas akibat FAQ dan ringkasan buatan LLM
- Pada thread tahun 2007 tentang HP 50g Graphing Calculator, jawaban dan FAQ yang tampak dibuat LLM tidak berhasil menambah nilai informasi asli
- Jawaban buatan LLM pada thread itu hanya benar dalam satu fakta, yaitu keberadaan “HP 50g Connectivity Kit”, sementara sisanya tidak tercermin dalam manual HP 50g atau sumber nyata lainnya
- FAQ menyebut fungsi “GET” dan “PUT”, tetapi fungsi tersebut maupun “HP 50g Spreadsheet” tidak muncul dalam manual, dan hasil pencarian juga tidak menemukan apa pun selain thread tersebut
- Dalam perhitungan jumlah kata pada thread itu, bagian yang ditulis LLM mencapai 92%
- Summary: 99 kata, bukan manusia
- Springo: 38 kata, manusia
- Phys.org: 34 kata, bukan manusia
- Shinny_head: 11 kata, manusia
- Ravenprp: 164 kata, bukan manusia
- FAQ: 260 kata, bukan manusia
- Secara keseluruhan situs, posting LLM yang disisipkan mundur diperkirakan sekitar 1,6% dari semua posting dan sekitar 3% dari semua kata
- Jika FAQ dan ringkasan LLM juga dihitung, porsi kata yang ditulis manusia di seluruh PhysicsForums menjadi 66%
Tulisan AI yang ditemukan komunitas dan perubahan yang disembunyikan
- Pengguna PhysicsForums pada November 2024 menemukan kejanggalan bahwa akun Azntoon tampak memposting di thread tahun 2022 meski login terakhirnya tercatat pada 2012
- Saat itu pembahasannya ditutup sebagai kemungkinan masalah basis data
- Setelah itu, tanggal login terakhir Azntoon berubah menjadi Desember 2022
- Pengguna forum telah mendiskusikan kebijakan soal jawaban buatan ChatGPT sejak 2022
- Vanadium 50 mengeluhkan bahwa “barely-lucid posts” dari ChatGPT menimbulkan banyak pekerjaan dan bisa dipandang seperti serangan DoS
- Greg Bernhardt mengatakan Stack Overflow tampaknya mencoba pelarangan, dan PhysicsForums setidaknya juga harus menandai konten ChatGPT sebagai kutipan
- Pada 1 April 2023, nama tampilan memang diubah menjadi ChatGPT sebagai acara April Mop, tetapi itu tidak dipahami sebagai posting yang benar-benar ditulis oleh ChatGPT
- Pengguna yang terdampak oleh LLM disembunyikan dari pelengkapan otomatis pencarian, dan tautan profil pada posting juga dihapus
- Akibatnya, menjadi lebih sulit memeriksa tanda-tanda aneh seperti tanggal login terakhir melalui profil
- Saat artikel ini ditulis, masalah FAQ juga ditemukan oleh komunitas, dan dibuka diskusi low-quality FAQ discussion
- FAQ tampaknya tidak terlihat oleh pengguna yang sedang login
- FAQ sudah dihapus, tetapi ringkasan buatan LLM di bagian atas thread tertutup masih tetap ada
Jawaban Greg Bernhardt dan penjelasan soal pengujian
- Greg Bernhardt menjawab pertanyaan tentang penggunaan LLM di PhysicsForums dengan mengatakan bahwa berbagai uji AI sedang berlangsung untuk meningkatkan nilai komunitas
- Dalam formulir umpan balik 2024, banyak anggota menyatakan tidak menginginkan fitur AI, dan ia menjawab bahwa fitur tersebut kemungkinan akan diperbaiki besar-besaran atau dihapus
- Ia juga mengatakan bahwa pada tahun sebelumnya telah dilakukan eksperimen jawaban AI dengan akun uji, tetapi hasilnya tidak memenuhi standar kualitas
- Untuk pertanyaan lanjutan, ia menjelaskan pernah membayangkan bot yang dapat memberi jawaban berkualitas tinggi pada thread yang tak mendapat balasan selama lebih dari setahun, tetapi upaya itu gagal
- Ia juga menyatakan sedang mempertimbangkan cara membereskan semua thread tanpa jawaban karena itu membuat forum berantakan
Identitas akun dan integritas arsip
- Cara mengisi akun pengguna lama dengan tulisan buatan LLM mengguncang harapan bahwa identitas akun dalam komunitas online adalah milik penggunanya
- Bahkan untuk akun yang relatif anonim, tulisan yang dibuat pengguna dengan nama itu dan waktu yang mereka curahkan tetap terhubung dengan identitas nyata mereka
- Jika kontrak sosial bahwa interaksi terutama terjadi antarmanusia rusak, nilai interaksi manusia yang ditawarkan komunitas online ikut berkurang
- Konten web lama sudah sulit dicari karena server telah hilang dan situs ditutup; jika kemudian bercampur dengan data buatan AI bertanggal masa lalu, penyelidikan arsip internet menjadi makin sulit
- Pengelolaan forum memang menghadapi tekanan seperti biaya server, pemeliharaan basis data, bot, DDoS, iklan, dan persaingan klik, tetapi jika demi bertahan justru merusak identitas inti komunitas dan kepercayaan pengguna, fondasi situs itu sendiri akan melemah
1 komentar
Komentar di Hacker News
Hal yang makin saya rasakan dari konten yang dibuat LLM adalah: tidak ada yang menginginkannya
Kalau ingin berbicara dengan AI, kita bisa langsung berbicara dengan AI. Alasan membaca blog atau forum diskusi adalah karena ingin melihat tulisan manusia, bukan membaca tulisan asal-asalan LLM hasil copas yang ditempel di bawah nama manusia
Belakangan ini saya menghabiskan cukup banyak waktu dan energi untuk menghindari konten LLM di web. Saat membaca tulisan lalu melihat gaya ChatGPT seperti “As we dive into the ever-evolving realm of...”, saya langsung kembali, dan di pencarian gambar saya memasukkan banyak filter pengecualian seperti
-AI,-Midjourney,-StableDiffusion. Beberapa pencarian bahkan saya batasi sebelum 2022Kalau Google menambahkan filter global “hapus konten generatif” yang benar-benar berfungsi, rasanya saya akan menyalakannya dan tidak pernah mematikannya lagi. Ada juga penelitian yang menunjukkan bahwa pengguna langsung tidak menyukai konten yang tampak dibuat AI, terlepas dari kualitasnya, sehingga penerbit punya insentif untuk mencuci-manusiakan tulisan AI agar terlihat seperti ditulis manusia. Ini pertama kalinya saya melihat cara seperti memanipulasi timestamp dan mengambil alih akun lama
Di Reddit saya kadang melihat tulisan seperti “saya tidak terlalu tahu, tapi ChatGPT bilang begini”, dan yang lebih buruk, ada juga yang memposting copas ChatGPT seolah-olah itu tulisan mereka sendiri. Lucunya, gaya tulisannya terlihat seperti tulisan orang HR, jadi mudah ketahuan
Kalau seseorang tidak punya akses ke model yang bagus, mungkin ada sedikit nilai, tetapi format membuat halaman statis sepuluh paragraf untuk menjawab satu pertanyaan secara seadanya bukanlah sesuatu yang disukai siapa pun. Antarmuka chatbot sungguhan bisa menyajikan informasi dengan cara yang sesuai untuk saya, tetapi tulisan daftar yang asal-asalan hanyalah penyebut bersama terkecil yang disesuaikan untuk pembaca seluas mungkin
Masalah lainnya adalah menyajikan ulang informasi tidak menciptakan informasi baru. Saat mencari jenis oli yang harus dimasukkan ke mobil atau resep muffin blueberry, yang dibutuhkan adalah bukti nyata, seperti apakah pabrikan mengatakan harus memakai oli dengan grade tertentu, atau apakah seseorang benar-benar memanggangnya dan memverifikasi hasilnya. Memamah ulang teks dari sumber lain pada umumnya tidak menambahkan apa pun dalam hidup saya
Kalau sebuah tulisan terasa dibuat LLM, saya menganggapnya sebagai sinyal bahwa penulisnya tidak tahu lebih banyak daripada saya, dan tidak ada cara bagi saya untuk percaya bahwa informasinya benar
Banyak pelanggan tidak suka pramuniaga, dan sebagian meninggalkan toko atau bahkan tidak masuk karena pramuniaga, sehingga toko kehilangan penjualan. Meski begitu, praktik ini terus berjalan. AI juga harus bersiap menghadapi yang terburuk. Rasa etika, penilaian bisnis, maupun rasionalitas tidak akan menghentikan perusahaan menjejalkan AI. Tampaknya membuat pelanggan kesal dianggap lebih penting
Tren bahwa sekitar awal 2010-an Google mulai perlahan tidak lagi menempatkan tulisan forum tradisional dan blog di peringkat atas pencarian, terlepas dari kualitasnya, jika bukan situs “besar”, juga cocok dengan pengalaman blog saya
Sebaliknya, fakta bahwa dari 2003 hingga 2025 URL-nya tidak berubah, tulisan lama tidak dihapus, dan situsnya juga tidak menghilang, itu luar biasa. Bookmark blog saya dari 2008 juga masih berfungsi
CMS-nya sekarang sudah tidak ada dan semuanya menjadi situs statis, tetapi terlalu banyak organisasi yang bahkan tidak melakukan perapian sebesar ini ketika “menyegarkan” keberadaan web mereka
Diskusi terkait saat itu: https://techcrunch.com/2014/01/23/googles-search-filters-now..., http://googlesystem.blogspot.com/2014/03/bring-back-forum-se..., https://www.ghacks.net/2014/01/23/search-discussions-blogs-p..., https://www.seroundtable.com/google-search-filters-gone-1799..., https://www.webmasterworld.com/google/4687960.htm, https://www.thecoli.com/threads/i-cant-google-search-by-disc..., https://www.neogaf.com/threads/anyone-else-annoyed-google-re..., https://webapps.stackexchange.com/questions/57249/has-the-op..., https://www.bladeforums.com/threads/how-to-do-google-discuss..., https://browsermedia.agency/blog/alternatives-discussion-sea...
Forum dan blog punya budaya yang tidak bisa direplikasi oleh Reddit atau media sosial, jadi sayang sekali kehilangan itu
Sedih melihat hal seperti ini terjadi pada PhysicsForums. Itu salah satu situs web pertama yang sering saya pakai 15 tahun lalu saat masih bersemangat soal fisika, dan kemudian saat mulai berkarier
Saya terutama membacanya dan sesekali ikut berkontribusi, dan saya masih ingat para anggota yang dulu saya pikir suatu hari nanti saya akan sepintar dan sebanyak pengetahuan mereka. Di tengah arus perpindahan ke media sosial setelah Arab Spring, suasananya mulai berubah ketika era forum sebagai pusat diskusi mulai berlalu
Sejak sekitar 2018, saya tidak lagi berkunjung kecuali masuk lewat Google, lalu kemudian lewat pencarian Kagi, tetapi arsipnya masih berguna untuk menjawab pertanyaan. Saya sulit setuju dengan penilaian tulisan itu bahwa karena tautannya tidak dibagikan di Twitter, berarti tidak ada yang peduli
Tulisan ini terlalu mengubur poin utamanya. Hampir di akhir cerita, pemilik situs mengonfirmasi bahwa dialah yang menambahkan komentar AI yang diberi tanggal mundur. Mungkin sebenarnya itu sudah jelas
Saat membuat akun di komunitas online, ada kontrak sosial bahwa kita terutama akan berinteraksi dengan manusia. Memang akan ada akun promosi, bot, dan pengiklan, tetapi kesepakatan antara pengguna dan penyedia komunitas adalah penyedia akan berusaha melindungi kita dari hal-hal itu, sementara kita menyediakan partisipasi dan konten
Karena itu, eksperimen pengguna buatan AI dari Meta terasa konyol dan menjijikkan. Jika kita bisa berinteraksi dengan sesuatu yang berpura-pura menjadi manusia, dan hasilnya paling banter hanya sampah yang hambar, maka nilai interaksi antarmanusia melalui internet akan hilang
Ini bencana. Saya tidak bisa membayangkan masa depan di mana tulisan sampah yang dibuat secara artifisial pada akhirnya tidak membanjiri setiap bagian internet hingga membuatnya tidak bisa dipakai. Era konten buatan pengguna mungkin sudah berakhir
Memang ada akun bot peniru identitas, tetapi dengan melihat jumlah pengikutnya kita bisa dengan mudah memblokirnya. Begitu saya mengetahui public key yang dipakai Lyn, saya bisa yakin bahwa tulisan yang muncul di bawahnya berasal dari dirinya
Ia bisa saja mengunggah omong kosong LLM, tetapi orang-orang akan cepat menyadarinya dan berhenti mengikutinya. Bagian pentingnya adalah, kecuali saya menginginkannya, tidak ada algoritma yang menentukan apa yang terlihat di feed saya, sehingga konten LLM acak sulit masuk ke feed saya
Pilihan lain adalah bukti identitas zero-knowledge yang membuktikan bahwa seseorang adalah manusia tanpa mengekspos informasi pribadi, atau tanpa bergantung pada server pusat untuk login atas nama kita: https://zksync.mirror.xyz/kWRhD81C7il4YWGrkDplfhIZcmViisRe3l...
Saya dengar ada server Discord yang tidak memberikan akses ke semua channel kecuali Anda pernah bertemu langsung dengan admin, dijamin oleh seseorang di dalam grup, atau “diverifikasi” lewat video call
Inilah masa depannya. Kita membutuhkan sesuatu dengan struktur seperti Discord, tetapi memiliki mekanisme seperti halaman web—yakni ruang yang dapat menampung bukan hanya tulisan, melainkan juga kumpulan dokumen—dan dapat diakses lewat browser
Namun, bergantung pada cara penemuannya, “internet” baru ini tidak lagi menjadi sarana mudah untuk melarikan diri dari realitas atau tempat tertentu. Salah satu pendorong besar penggunaan internet pada era 90-an dan 00-an adalah rasa ingin tahu untuk menjelajahi hal-hal baru yang tidak bisa ditemui di komunitas lokal, dan Google lama yang masih bisa dipercaya adalah penggerak utamanya
Ini perubahan buruk bagi orang yang benar-benar antisosial, tetapi tipe seperti itu mungkin justru berkembang di lingkungan yang penuh AI. Jika hub gerbang untuk internet manusia baru yang mungkin berbasis grup-ke-grup tetap mempertahankan lobi terbuka, kita mungkin bisa mendapatkan kelebihan dari kedua sisi
Pada akhirnya, kita mungkin akan menuju autentikasi identitas online yang diterbitkan oleh bank atau pemerintah
Pasti ada pasar untuk game yang membuat orang langsung menjadi selebritas influencer, tetapi pasar itu akan jauh lebih kecil daripada pasar media sosial
Saya tidak benar-benar memahami masalah “backdating” atau pembajakan akun. Tepatnya bagaimana ini dilakukan? Setelah membaca tulisannya pun saya merasa ada sesuatu yang terlewat
Menurut jawaban Greg Bernhardt, ada beberapa pengujian AI yang sedang dilakukan untuk menambah nilai bagi komunitas, dan banyak anggota tidak menginginkan fitur AI. Tahun lalu mereka bereksperimen dengan jawaban AI dari akun uji, tetapi tidak memenuhi standar kualitas, dan ia meminta agar diberi tahu jika ada akun uji yang terlewat ditemukan
Saya sama sekali tidak tahu mengapa akun manusia lama didaur ulang menjadi “akun uji” AI
Saya suka asumsi bahwa awalnya itu adalah akun asli
Dari sudut pandang orang yang mengelola forum atau blog dengan kolom komentar aktif, bagaimana rasanya jika pengguna datang, melihat-lihat saja, lalu tidak mengatakan apa pun selama seminggu? Awalnya Anda membuat topik dengan nama sendiri dan menulis balasan yang membantu, tetapi pada akhirnya Anda terlihat seperti orang bodoh yang berbicara sendirian
Jika forumnya punya trafik bagus dan banyak iklan spam, saya yakin godaan seperti ini pasti sempat dipertimbangkan ketika pengunjung pergi karena tidak ada tulisan baru
Dulu, di sebuah forum yang agak stagnan, saya pernah membuat dua akun dengan nama mirip dari IP yang sama dan berdebat dengan diri sendiri. Awalnya saya mengira operator atau pengguna lain akan menyadarinya, tetapi saya segera belajar bahwa ada begitu banyak hal aneh sampai tidak ada tindakan yang dianggap aneh
Gagasan atau kenyataan bahwa pemilik situs bisa mengambil alih akun orang-orang lalu membuat tulisan asal-asalan yang meniru mereka, mungkin demi pendapatan iklan, terasa membuat marah sekaligus melelahkan dan muram
Masalah kepercayaan dan atribusi memang selalu ada di web, tetapi karena berbagai alasan sekarang terasa jauh lebih buruk. Entah harus seburuk apa lagi sampai terjadi sebuah peralihan besar
Saya juga tidak benar-benar tahu solusinya. Haruskah kita mendaftarkan nama atau handle sendiri sebagai merek dagang, lalu mengancam gugatan meski tidak punya banyak uang? Haruskah semua orang menandatangani tulisan dengan kunci pribadi lewat infrastruktur kunci publik, lalu memakai CPU untuk memverifikasi tanda tangan demi mengecek peniruan identitas? Haruskah kita menangkap ekspektasi bersama yang tersirat lalu meresmikannya dalam kerangka sistem hukum dunia yang terpecah-pecah? Misalnya dengan mendirikan “bisnis” kecil tapi masuk akal yang menjual nasihat dan opini atas nama itu, lalu mempermasalahkan peniru karena merusak merek
Selain itu, cara jawaban-jawaban itu ditulis juga cukup mengganggu. Bahkan jika punya gelar teknik, saat menjawab dengan santai di internet saya hampir tidak pernah berkata “sebagai insinyur”. Karena untuk menjawab dengan kapasitas etis seperti itu, perlu analisis yang memadai. Namun bot tampaknya tidak punya keraguan semacam itu
Orang bernama ravenprp beberapa tahun lalu adalah mahasiswa teknik. Mungkin dampaknya lebih kecil karena ia tidak berkomentar dengan nama asli, tetapi mengingat sifat konten situs ini, sangat mudah muncul situasi ketika seseorang yang benar-benar bekerja di suatu bidang dan punya reputasi profesional ditiru “sebagai insinyur”
Situs itu bahkan memiliki catatan historis orang tersebut bertanya dan menjawab selama masa pendidikannya, sehingga bisa sangat menyesatkan orang agar percaya bahwa seorang insinyur sungguhan sedang menjawab pertanyaan. Saya tahu konsep reputasi profesional individu sudah banyak melemah di dunia modern yang sangat terkorporatisasi ini, tetapi makin dipikirkan, ini terasa benar-benar buruk dan bahkan mendekati berbahaya
Saya selalu bertanya-tanya apakah orang bisa menempelkan semacam penanda kriptografis pada tulisan mereka dan menghubungkannya ke arsip di suatu tempat. Awalnya saya terutama memikirkan pencadangan agar tulisan Yelp tidak hilang, tetapi entah apakah itu juga bisa mencegah tulisan yang tidak pernah ditulis seseorang
Forum ShackNews https://www.shacknews.com/chatty juga serupa. Jika menelusuri jauh ke belakang, Anda bisa menemukan tulisan-tulisan tentang situasi saat 9/11 terjadi
Dari arusnya, orang-orang AS dan mungkin Eropa tampaknya menyukai berbagai forum khusus seperti PhysicsForum. Sebaliknya, orang Tiongkok tampaknya lebih menyukai tempat yang tersentralisasi
Misalnya Zhihu(zhihu.com) dulu adalah tiruan Quora, tetapi sekarang menjadi situs terbesar untuk menemukan diskusi mendalam di hampir semua bidang, termasuk matematika, machine learning, sejarah, fisika, teknik, dan sains umum. Banyak sekali peneliti, pakar, dan pehobi berbagi wawasan di sana
Sementara itu, kualitas Quora tampaknya memburuk dari tahun ke tahun, dan sebagian besar pakar tersebar di berbagai forum khusus. Saya penasaran mengapa perbedaan seperti ini muncul