Nonfiksi Berkualitas Adalah Kebalikan dari AI Slop

• Penjelajahan rak buku yang memadukan sistem klasifikasi perpustakaan, kurasi pustakawan, dan riwayat peminjaman menawarkan kualitas sekaligus kebetulan yang lebih baik daripada mesin pencari, sehingga mengarahkan pembaca ke nonfiksi berkualitas yang tak terduga
• Platform gratis Book Prize Index memungkinkan pencarian dan pengurutan sekitar 6.500 buku pemenang dan finalis penghargaan sastra nonfiksi utama berbahasa Inggris, serta mendukung kueri bahasa alami dan pencarian buku serupa
• AI hanya digunakan untuk pengumpulan data, coding, dan pencarian semantik; bahkan hasil pencarian yang kadang sulit dipahami dapat berujung pada pengalaman penemuan seperti berjalan di antara rak buku yang dikelola dengan baik
• Catatan penghargaan sastra juga menghidupkan kembali karya unggul yang sudah tidak dicetak dan tersisih dari rekomendasi Amazon. Biografi W.E.B. Du Bois yang meraih 4 penghargaan besar pada 1993 berada di luar peringkat penjualan 1 juta teratas, tetapi dalam indeks posisinya hampir masuk 10 besar keseluruhan
• Perpustakaan riset terbuka, peningkatan mobilitas, perbaikan akses sosial, serta perubahan teknologi katalog dan media mengangkat kualitas nonfiksi abad ke-20; secara subjektif, puncaknya mungkin terjadi pada 1980-an hingga awal 2000-an

---

Kebetulan Terkurasi yang Dibentuk oleh Penjelajahan Rak

• Saat kuliah, ketika menata buku di area A–F dalam sistem klasifikasi Library of Congress, penulis mengenal luas buku-buku agama, filsafat, sosiologi, dan sejarah dengan cara membaca satu kalimat dari halaman acak setiap kali
  • Sebagian besar tidak menarik perhatian, tetapi ia tenggelam dalam buku tentang agama misteri Helenistik, The Education of Henry Adams, dan Are Clothes Modern?, membaca beberapa halaman dan bahkan memeriksa buku-buku di sekitarnya
• Pengalaman ini lebih mirip belajar mandiri yang terkurasi daripada membaca secara benar-benar acak
  • Sistem klasifikasi Library of Congress dan staf perpustakaan riset mengatur serta menyeleksi koleksi
  • Syarat bahwa buku itu sedang dipinjam berfungsi sebagai filter tambahan: buku tersebut sudah memiliki pembaca yang stabil
  • Hasilnya, pembaca dapat menjumpai sampel berkualitas yang telah diseleksi secara sistematis tetapi tetap memiliki unsur kebetulan yang menarik

Pencarian Google dan Kemunduran Rak Terbuka

• Pencarian Google yang digunakan mahasiswa S1 saat ini untuk mencari bahan memiliki pengalaman penemuan yang jauh kalah dibandingkan menjelajahi langsung rak klasifikasi tertentu di perpustakaan riset
• Ruang perpustakaan riset juga berubah dibandingkan masa lalu
  • Rak terbuka yang bisa dijelajahi sedang digantikan oleh Learning Lab, Digital Innovation Hub, serta area duduk untuk bersosialisasi dan menikmati camilan
  • Kasus pembuangan buku lama dan unik, atau penggantiannya dengan edisi elektronik, juga semakin banyak
• Meski begitu, kualitas nonfiksi tetap tinggi; bahkan di tengah berkurangnya pembaca akibat persaingan dengan chatbot AI dan podcast, masa keemasan nonfiksi yang belum mendapat pengakuan layak masih berlanjut

Komposisi Book Prize Index

• Book Prize Index adalah platform gratis yang dibuat untuk menjelajahi long tail nonfiksi berkualitas tinggi
• Platform ini menggunakan riwayat pemenang dan finalis penghargaan sastra nonfiksi utama berbahasa Inggris sebagai tolok ukur kualitas
  • Setelah menghimpun daftar penghargaan utama, Claude dan GPT-5.6 digunakan untuk mengumpulkan pemenang dan finalis dari Wikipedia serta berbagai sumber online lain
  • Data yang terkumpul disusun menjadi daftar yang dapat dicari dan diurutkan
• Biaya hosting dan API ditanggung sendiri agar siapa pun dapat menggunakannya secara gratis

Meniru Jalan-jalan di Rak dengan Pencarian Semantik

• Peran AI dibatasi pada pengumpulan data, coding, dan pencarian semantik (semantic search)
• Pencarian semantik secara langsung meningkatkan pencarian teks yang sudah digunakan para peneliti
  • Dapat mencari frasa sederhana seperti modern France dan social history
  • Juga dapat memproses kueri bahasa alami dengan makna kompleks seperti classic biographies that are surprisingly weird
  • Model embedding menemukan buku yang relevan dari sekitar 6.500 judul
• Meski hasilnya kadang sulit dipahami, ketakterdugaannya mereproduksi pengalaman penemuan seperti berjalan acak di taman yang terawat baik
• Ini sangat cocok terutama untuk penggunaan books like, yaitu mencari buku yang mirip dengan buku yang sudah disukai
  • Jika mencari dengan acuan memoar Wina sebelum perang karya Stefan Zweig, The World of Yesterday, pengguna dapat langsung menemukan buku-buku menjanjikan yang sebelumnya belum dikenal

Visualisasi Data dan Peringkat Penerbit

• Data yang terkumpul digunakan untuk membuat visualisasi eksperimental
  • Sekitar 5.000 buku dalam korpus disusun berdasarkan warna sampul
  • Dengan membandingkannya per dekade, pengguna dapat melihat apakah fenomena seperti warna mobil yang makin kelabu dalam beberapa dekade terakhir juga muncul pada sampul buku
• Melalui grafik di halaman yang sama dan peringkat penerbit, pengguna dapat menjelajahi imprint dan penerbit dengan kinerja terbaik dalam penghargaan sastra nonfiksi selama satu abad terakhir

Long Tail Nonfiksi yang Dilestarikan Penghargaan Sastra

• Bahkan kategori nonfiksi Pulitzer Prize baru dimulai relatif baru, yaitu pada 1962
• Jumlah penghargaan sastra nonfiksi meningkat pada 1970-an hingga 1990-an, mencapai puncak pada 2014, dan mungkin mulai menurun perlahan sejak 2020
• Long tail kandidat dan pemenang selama beberapa dekade terakhir menunjukkan kualitas yang konsisten tinggi
  • Bahkan jika memilih hampir secara acak dari daftar, pembaca bisa menemukan buku yang orisinal dan luar biasa
  • Buku-buku ini bukan karya yang diabaikan saat terbit, melainkan karya yang mendapat pujian dari media, dunia sastra, dan akademisi, tetapi kini tersisih dari sistem rekomendasi
• Biografi W.E.B. Du Bois karya David Levering Lewis menunjukkan keterputusan ini dengan baik
  • Saat diterbitkan pada 1993, buku ini meraih 4 penghargaan utama dan dalam indeks berada hampir di 10 besar keseluruhan
  • Kini sudah tidak dicetak dan peringkat penjualannya di Amazon berada di luar 1 juta teratas, sehingga kecil kemungkinan direkomendasikan, tetapi bisa dibeli bekas dengan harga sekitar 4 dolar

Perubahan yang Membentuk Masa Keemasan Nonfiksi

• Desain dasar perpustakaan riset dengan rak terbuka muncul pada abad ke-18 dan ke-19, tetapi perubahan teknologi dan sosial era pascaperang mengubah secara besar-besaran cara perpustakaan dan arsip menghasilkan pengetahuan baru
• Pesawat jet penumpang membuka peluang riset lapangan lintas benua bagi lebih banyak penulis dan peneliti, yang sebelumnya hanya tersedia bagi kalangan superkaya
• Ketika pembatasan berdasarkan kelas, ras, dan gender melemah, akses ke ruang elite seperti perpustakaan buku langka meningkat, dan pertanyaan riset baru pun menjadi mungkin
  • Penulis biografi sebelum sekitar 1965 hampir tidak pernah mengeksplorasi orientasi seksual tokoh yang mereka tulis
• Sistem klasifikasi Library of Congress dan teknologi digital awal seperti MARC (machine-readable cataloguing) yang dikembangkan pada akhir 1960-an memudahkan klasifikasi dan pengurutan buku
  • Verifikasi sumber dan penulisan catatan akhir berkualitas tinggi juga menjadi jauh lebih mudah
• Berita televisi, program wawancara TV unik seperti Dick Cavett, dan jalur adaptasi buku ke Hollywood memberi penulis insentif baru serta platform untuk memperkenalkan karya mereka
• Belum jelas apakah pengolah kata dan komputer awal benar-benar meningkatkan kualitas nonfiksi
  • Setelah 2000-an, Wikipedia dan Google Books/Hathi Trust memberi kontribusi besar bagi riset generasi tersebut

Puncak Kualitas Nonfiksi

• Berdasarkan penilaian subjektif setelah menelusuri banyak buku perpustakaan, kualitas penulisan nonfiksi meningkat sepanjang abad ke-20
• Puncaknya mungkin berada di antara 1980-an hingga awal 2000-an
• Sulit memastikan apakah kualitas nonfiksi saat ini benar-benar sedang menurun

[GN⁺]

Komentar Hacker News

• Novel yang bagus pada dasarnya adalah kebalikan dari AI. LLM bisa menggabungkan berbagai elemen untuk menghasilkan sesuatu yang tampak kreatif, tetapi ada batasnya, dan sulit dibayangkan bahwa bahkan setelah ribuan prompt dimasukkan, akan lahir karya yang benar-benar orisinal seperti novel hebat
  Karya semacam itu membutuhkan keajaiban dan absurditas kehidupan

  • Agak kurang nyambung mengapa agar manusia lebih kreatif, mereka harus mengalami keajaiban dan absurditas kehidupan. Penciptaan manusia pada akhirnya juga proses menyambung dan menyusun ulang pengalaman sendiri, jadi kalau AI punya cukup data yang mencerminkan itu, bukankah ia juga bisa menghasilkan sesuatu yang benar-benar orisinal?
    Kecerdasan dan kreativitas sama-sama merupakan rekombinasi, dan AI pun bisa melakukannya dengan baik seperti manusia. Perbedaannya saat ini adalah data yang dihadapi manusia jauh lebih analog, emosional, dan berbasis realitas
  • Semakin bertambah usia, ucapan tidak ada yang baru di bawah matahari terus teringat
  • AI cukup berguna dalam salah satu cabang nonfiksi yang mendokumentasikan dan menjelaskan hal-hal teknis. Saya pernah memberi tahu preferensi saya dan memintanya menulis novel fantasi, tetapi hasilnya mengerikan, jadi sepertinya AI belum akan segera merebut pekerjaan penulis fantasi
  • Saat ini saya tidak ingin membaca novel yang ditulis LLM, tetapi saya memperkirakan di masa depan pendapat saya bisa berubah dan akan muncul karya yang layak dinikmati. Namun, nonfiksi juga jauh lebih sulit digantikan oleh LLM
    https://www.goodreads.com/en/book/show/17801.Underground dan https://www.goodreads.com/en/book/show/44824581-a-k-pop-live yang sedang saya baca bergantung pada bahan yang sangat luas, termasuk wawancara tatap muka yang sulit terwujud dan kehadiran di acara lapangan, sehingga LLM tidak bisa menulisnya. Bahkan buku yang relatif biasa seperti https://www.goodreads.com/series/139929-designers-dragons pun memakai sumber yang tidak terdigitalisasi atau tidak ada dalam kumpulan materi digital umum
    LLM mungkin pandai dalam pekerjaan sintesis, tetapi masih kekurangan alat dan sistem verifikasi untuk menulis buku nonfiksi yang benar-benar mumpuni. Bahkan jika kelak itu memungkinkan, nonfiksi yang paling unggul dan menarik akan tetap menjadi ranah manusia, dan memoar maupun catatan perjalanan juga sulit digantikan kecuali jika hanya didiktekan
  • Model semakin menunjukkan kemampuan untuk mengekstrapolasi ke wilayah yang belum dieksplorasi manusia, seperti dalam pembuktian matematika. Saya penasaran apa dasar keyakinan bahwa khusus mengambil bahan dari absurditas hidup adalah sesuatu yang sangat sulit bagi model

• Informasi yang diperoleh dari membaca tulisan panjang dan informasi yang diperoleh dari percakapan dengan LLM kemungkinan disimpan secara berbeda di otak. Saat membaca tulisan yang sulit atau baru, kita lama memikirkan bagaimana isinya terhubung dengan pengalaman atau pengetahuan yang sudah ada, dan pada halaman yang sulit kita berhenti untuk mengintegrasikan dan menyusun ulang pemikiran
  Sebaliknya, saat berbicara dengan LLM, terasa seperti menerima pengetahuan secara pasif sehingga tidak cukup terintegrasi. Saat belajar dari guru manusia rasanya tidak demikian, yang agak paradoksal

  • Ini mirip dengan asimilasi dan akomodasi dalam teori pendidikan. Asimilasi adalah proses ketika pengetahuan masuk ke skema kognitif yang sudah ada, sedangkan akomodasi adalah mengubah skema itu sendiri demi pengetahuan baru, sehingga muncul rasa tertantang atau mendalam
    Misalnya anak belajar bahwa orang asing adalah orang dari luar negaranya, lalu saat pertama kali bepergian ke luar negeri ia menyadari bahwa dirinya sendiri adalah orang asing di sana. Output LLM tampaknya cenderung berbentuk sesuatu yang mudah diasimilasi
  • Saya mendengarkan audiobook saat berjalan-jalan atau mendaki, dan ketika mengingat apa yang dipelajari, kadang saya juga teringat sedang berjalan di mana saat itu. Masih banyak yang belum kita pahami tentang cara manusia memproses informasi
  • Ungkapan bahwa saat berinteraksi dengan LLM kita menerima pengetahuan secara pasif terdengar hampir seperti kontradiksi dalam istilah, dan sangat berbeda dari pengalaman saya
  • Ini tampaknya lebih ditentukan oleh cara menggunakan alatnya. Saya tidak belajar dengan baik hanya dengan membaca; saya harus langsung mencoba dan terus bertanya tentang bagian yang tidak saya pahami, dan LLM memungkinkan saya bertanya berulang-ulang sampai tingkat yang kalau ke manusia mungkin kesabarannya cepat habis
    Seperti saat belajar sendiri dari materi asli, saya menuliskan apa yang saya pahami, membuat flash card, dan berlatih secara aktif, sambil bisa menggali lebih dalam bagian yang sulit. Karena itu, integrasi dan rekonstruksi pemikiran yang tidak bisa saya lakukan dengan cara lain menjadi mungkin
    Jika LLM dipakai seperti mesin slot pengetahuan dan isi yang diterima langsung dijalankan tanpa proses perantara, hasilnya bisa berbeda
  • Setiap orang menyerap informasi dengan cara berbeda, jadi dugaan seperti ini bisa sangat meleset. Fakta bahwa seseorang tidak menyukai LLM tidak bisa digeneralisasi menjadi kesimpulan tentang otak manusia atau pendekatan terhadap pengetahuan secara umum; di sini hampir semuanya hanyalah pengalaman subjektif pribadi

• Penghargaan buku adalah sinyal di atas rata-rata, tetapi penerbit mengirim banyak buku ke semua penghargaan yang sedikit saja relevan dan menganggapnya sebagai biaya bisnis. Ini mirip dengan fotografer yang membayar biaya pendaftaran demi gelar ‘fotografer pemenang penghargaan’, atau perusahaan yang menyerahkan biaya penjurian dan materi penilaian
  Buku terlalu banyak dan juri yang benar-benar memenuhi syarat terlalu sedikit, sehingga memenangi penghargaan bisa menjadi sewenang-wenang atau sangat mudah secara tidak masuk akal. NCR Book Award sempat menuai kontroversi besar setelah terungkap bahwa para juri tidak benar-benar membaca bukunya [1], dan PROSE Award begitu besar skalanya sehingga prestise menjadi finalis atau pemenang di kategori umum sering dibesar-besarkan
  [1] https://www.theguardian.com/news/2013/may/19/literary-prize-judges-admit-failure-read-books

  • Penghargaan adalah produk zamannya, jadi selain mencerminkan bias juri dan selera sastra pembaca, ia juga mencerminkan nepotisme, favoritisme, dan elitisme. Jika melihat para pemenang dan nominasi Hugo, Nebula, dan Locus selama bertahun-tahun, akan ditemukan banyak karya yang biasa saja
  • Penghargaan bir dan anggur juga sama; beberapa memang bagus, tetapi kebanyakannya lebih mirip lotre promosi berbayar

• Di bagian ‘teknologi’ dan ‘sains’ aku menemukan beberapa buku bagus yang sudah kubaca dan beberapa yang ingin kubaca, jadi termotivasi untuk membangun lagi kebiasaan membaca harian yang sempat hilang. Belakangan ini buku-buku ‘masyarakat dan budaya’ juga tampak bagus untuk klub baca
  Ada satu bug: di filter ‘award’, kalau memilih Pulitzer atau National Book Award hasilnya kosong, tetapi saat menjelajah buku pemenang itu tetap terlihat

  • Awalnya situs ini dibuat untuk dipakai sendiri, tetapi aku jadi ketagihan mengembangkannya setelah menemukan buku-buku bagus yang sebelumnya tidak kukenal lewat pencarian berbasis makna dan penjelajahan kategori. Semoga bisa berfungsi sama untuk orang lain
  • Setelah belakangan ini memperbaiki kebiasaan memakai ponsel dan TV, sekarang kami sekeluarga mengadakan klub baca hening alih-alih malam film
    1. Aku memasang Jomo di ponsel agar harus menunggu 5 detik sebelum membuka aplikasi yang memicu rangsangan berlebihan dan hanya bisa memakainya 5 menit; setiap kali dibuka waktu tunggunya bertambah 5 detik dan direset pada tengah malam. Gesekan ini inti utamanya
    2. Buku kertas yang terasa menarik langsung kubeli dan kutaruh di berbagai sudut rumah
    3. Aku mengaitkan membaca dengan kebiasaan yang sudah ada. Setiap hari saat pergi olahraga aku membawa buku, lalu setelah olahraga aku membaca sambil minum kopi di kafe seberang, dan malam hari aku membaca sebelum tidur. Setelah menamatkan beberapa buku, aku jadi tenggelam dalam membaca dan malah sulit fokus menonton TV, sementara scroll tanpa akhir mulai terasa tidak enak bahkan saat sedang dilakukan, seperti makan junk food
       Untuk buku awal, aku merekomendasikan https://bookshop.org/p/books/true-grit-charles-portis/5ac45463b35e7b22

• Aku banyak belajar teknik yang mengubah hidup dan proses yang menuntunku ke sana dari buku-buku yang letaknya dua atau tiga rak dari buku yang kucari di perpustakaan riset. Setelah menjadi peneliti, aku meminta pustakawan mengirimkan buku ke cabang dekat kantor sehingga tidak lagi melihat-lihat rak sendiri, tetapi suatu kali aku meminjam beberapa buku yang berada di samping buku dalam katalog di perpustakaan utama dan mendapat terobosan besar
  Sekarang perpustakaan yang sama sudah memasang rak bergerak, sehingga menjelajah jadi merepotkan, dan rasanya ada sesuatu yang berharga telah hilang: penemuan kebetulan saat menyusuri rak
  Aku menaruh harapan besar pada daftar di situs ini, tetapi untuk bidang keahlianku masih kurang. Kalau mencari buku mirip Nutritional Ecology of the Ruminant karya van Soest atau Animal Breeding: Use of New Technologies karya van der Werf, yang keluar malah banyak buku sains populer. Buku-buku yang dulu kutemukan di perpustakaan tetap ketat secara ilmiah sekaligus sangat mudah dipahami dan menarik, tetapi buku sains populer yang direkomendasikan terasa seperti ingin menjual sesuatu alih-alih mendorong pembaca mengeksplorasi ide sendiri, jadi sepertinya aku harus kembali melihat rak secara langsung

• Akan bagus kalau mendukung pencarian penulis. Aku baru mulai membaca seri LBJ karya Caro dan sejauh ini luar biasa; aku jadi penasaran berapa banyak penghargaan yang dia terima. Aku suka nonfiksi, jadi sepertinya akan sering mengunjungi situs ini

  • Secara lebih umum, akan bagus kalau judul kolom bisa diklik untuk mengurutkan berdasarkan tahun, judul, penerbit, penulis, skor, dan sebagainya. Di beberapa layar ini berfungsi, tetapi di layar lain tidak, jadi terasa kurang intuitif
    Peralihan antara pencarian ‘traditional’ dan ‘semantic’ terasa segar, tetapi akan lebih baik kalau saklarnya tetap terlihat bukan hanya di tab beranda, melainkan juga di tab buku

• Aku paham daya tarik penemuan kebetulan saat menjelajah buku secara agak acak, tetapi justru aplikasi web ini tampak seperti kebalikannya. Aku mengklik beberapa kategori, dan semua buku teratas tercium seperti hasil voting popularitas, jadi jauh dari penjelajahan acak

• Akan bagus jika menambahkan Axiom Business Book Awards, Library Journal Best Books of the Year, dan Booklist Magazine's Editor's Choice Awards. Ada juga beberapa Substack populer yang sangat berfokus pada ulasan buku, tetapi aku bahkan tidak akan merekomendasikan favoritku untuk situs agregasi publik

  • Axiom rencananya akan ditambahkan. Namun, daftar tipe ‘book of the year’ agak berbeda dari penghargaan buku, jadi aku masih memikirkan apakah dan bagaimana menambahkannya, meski kemungkinan besar itu akan jadi langkah berikutnya untuk menambah jumlah buku di daftar
    Aku juga ingin menerima rekomendasi penghargaan lain. Karena aku seorang sejarawan, aku lebih tahu penghargaan terkait sejarah, jadi daftar saat ini mungkin terlalu condong ke bidang sejarah

• Bagian sejarah dalam indeks penghargaan buku terlalu bias ke Amerika Serikat. Fokusnya pada sejarah Amerika, penduduk asli Amerika, Jepang pasca-Perang Dunia II, dan Vietnam pada abad lalu

  • Pada akhirnya itu karena buku semacam itulah yang laku. Amerika punya populasi besar, jadi bahkan topik niche seperti sejarah pun bisa menghasilkan uang jika menyasar pembaca Amerika
    Para sejarawan yang tidak berusaha menjual buku untuk pasar umum menulis buku yang jauh lebih luas, tetapi sulit ditemukan di toko buku biasa
  • Ironisnya, dibandingkan Eropa, Afrika Utara, Timur Tengah, Persia, Tiongkok, Asia Tengah, dan India, Amerika justru sebenarnya relatif miskin akumulasi sejarah

• Aku sedang mencari buku tentang Perang Saudara Spanyol dalam bahasa Spanyol atau Inggris. Aku tidak suka buku-buku Amerika yang direkomendasikan, dan aku ingin terus mencari tanpa memedulikan bahasa atau negara pemberi penghargaan, jadi akan bagus kalau penghargaan buku dari negara nonberbahasa Inggris juga disertakan

  • Bukan perang itu sendiri yang paling menarik, melainkan bagaimana perang itu bisa terjadi dan mengapa seluruh negeri menerima pertikaian itu. Untuk memahaminya, kita harus mulai dari akhir rezim diktator sebelumnya dan melihat seluruh Republik Spanyol Kedua agar perang itu bisa dipahami
    Aku merekomendasikan The Collapse of the Spanish Republic karya Stanley Payne. Ia seorang jurnalis yang berada di Spanyol sepanjang periode itu, jadi ia terutama menyampaikan apa yang ia saksikan langsung; ia tidak mengklaim netral, tetapi karena mengenal banyak tokoh utama secara pribadi, pembahasannya sangat bernuansa
  • Dari buku yang sudah kubaca, aku sangat merekomendasikan The Spanish Civil War karya Paul Preston dan Homage to Catalonia karya George Orwell. Dalam daftar bacaku ada The Spanish Civil War karya Hugh Thomas dan The Fight for Spain karya Antony Beevor, dan aku ingin segera mendapatkannya untuk dibaca