BrainGPT, Mengubah Pikiran Menjadi Teks

Terobosan baru dalam teknologi pembacaan pikiran

• Tim peneliti dari GrapheneX-UTS Human-centric Artificial Intelligence Centre di University of Technology Sydney mengumumkan terobosan baru terkait teknologi 'pembacaan pikiran'.
• Riset ini berhasil mengubah pikiran menjadi kata-kata yang ditampilkan di layar, dan dinilai sebagai upaya perintis yang menerjemahkan gelombang EEG mentah langsung ke bahasa.
• Dalam proses menerjemahkan gelombang otak ke teks, mereka memperkenalkan teknik pengodean diskret dan, melalui integrasi dengan model bahasa berskala besar, disebut membuka prospek baru di bidang neurosains dan AI.

Teknologi penerjemahan bahasa menggunakan gelombang otak

• Saat para peserta membaca teks dalam hati, model AI bernama DeWave memproyeksikan kata-kata ke layar dengan hanya menggunakan gelombang otak mereka sebagai input.
• Teknologi ini merupakan satu-satunya teknologi yang dapat menerjemahkan sinyal otak menjadi bahasa tanpa memerlukan implan otak atau akses ke mesin MRI penuh.
• Dibandingkan teknologi sebelumnya yang memerlukan input tambahan, seperti perangkat lunak pelacakan mata, teknologi baru ini dapat digunakan tanpa fitur tambahan semacam itu.

Kepraktisan dan kemudahan

• Pengguna hanya perlu mengenakan topi yang merekam aktivitas otak melalui EEG, sehingga jauh lebih praktis dan nyaman dibanding pelacak mata atau mesin MRI.
• Tim peneliti mengakui bahwa sinyalnya agak lebih berisik dibanding informasi yang diperoleh dari implan, tetapi mengungkapkan bahwa dalam pengujian teknologi ini berkinerja cukup baik.
• Dalam pengukuran akurasi menggunakan algoritma BLEU, teknologi ini memperoleh skor sekitar 0.4.

Potensi peningkatan akurasi

• Model ini lebih mampu mencocokkan kata kerja, tetapi untuk kata benda cenderung memilih pasangan sinonim, seperti "pria" alih-alih "penulis".
• Tim peneliti menilai bahwa saat otak memproses kata-kata tersebut, kata-kata yang mirip secara semantik dapat menghasilkan pola gelombang otak yang serupa.
• Tim peneliti yakin akurasinya dapat ditingkatkan hingga 0.9, yang setara dengan program penerjemahan bahasa tradisional.
• Tim peneliti melakukan eksperimen terhadap 29 peserta, jumlah yang jauh lebih banyak dibanding pengujian teknologi decoding lainnya.

Opini GN⁺

• Teknologi ini menunjukkan kemajuan yang menakjubkan dalam menerjemahkan pikiran manusia secara langsung menjadi bahasa melalui gelombang otak.
• Aksesibilitasnya, yang memungkinkan penggunaan hanya dengan topi EEG tanpa implan otak atau mesin rumit, membuat teknologi ini sangat inovatif.
• Ke depannya, teknologi ini dapat sangat membantu orang-orang dengan gangguan komunikasi dan berpotensi membawa interaksi manusia dan mesin ke dimensi baru.

[GN⁺]

Komentar Hacker News

• Riset brain-computer interface (BCI) terutama berfokus pada membantu pasien lumpuh memulihkan kemampuan berkomunikasi.

  • EEG tidak dapat memberikan rasio signal-to-noise yang memadai karena keterbatasan fisik berupa melemahnya medan listrik otak di luar tengkorak, sehingga tidak mendukung kecepatan komunikasi yang baik.
  • Mainan komersial "pembaca pikiran" sebenarnya bekerja berdasarkan sinyal otot kepala dan mata.
  • Elektroda implan memberikan sinyal yang lebih baik, tetapi masih memerlukan banyak perbaikan sebelum layak secara komersial. Sinyal menurun setelah beberapa bulan karena otak membentuk jaringan parut di sekitar elektroda, dan operasi otak jelas berisiko.
  • Diperlukan persetujuan pemerintah untuk pengujian pada manusia, sehingga siklus iterasinya sangat lambat.
  • Jika ingin membantu teman yang lumpuh, akan lebih baik fokus pada teknologi pelacakan mata bila mereka hanya bisa menggerakkan mata.

• Ini bukan teknologi pertama yang dapat menerjemahkan sinyal otak menjadi bahasa, tetapi satu-satunya yang tidak memerlukan implan otak atau akses ke mesin MRI ukuran penuh.

  • Jika teknologi sensor menjadi cukup baik hingga bahkan tidak perlu memakai topi, saya bertanya-tanya apakah akan datang masa ketika orang diberi tahu untuk tidak berharap wajar bahwa pikiran mereka tidak akan dibaca di ruang publik.

• Teknologi ini juga bisa membantu refleksi diri.

  • Pola pikir seseorang dapat dianalisis dari luar untuk menemukan efektivitas teknik pembelajaran, mengetahui secara objektif kapan tingkat konsentrasi paling tinggi dan paling rendah, serta memahami dengan tepat kapan pikiran cemas mulai muncul dan apa penyebabnya.
  • FMRI dapat digunakan sebagai pendeteksi kebohongan berbasis pemindaian otak, tetapi ada banyak pertanyaan tentang validitasnya.

• Proyek "Silent Talk" dari DARPA dimulai 14 tahun lalu, dengan tujuan memungkinkan komunikasi antar pengguna tanpa komunikasi verbal dalam pertempuran melalui analisis sinyal saraf.

• Teknologi ini dapat membantu pasien stroke, tetapi juga bisa menyiarkan pikiran yang belum difilter, yang dapat menimbulkan masalah.

• Memprediksi pikiran dengan EEG seperti mencoba memprediksi awan di Austin dengan melihat awan di Mumbai. Sinyal listrik dari neuron individual tenggelam dalam osilasi berskala besar, lalu makin kabur oleh lapisan tulang, otot, dan jaringan antara otak dan perangkat. Bit rate-nya 1 bit per detik, yang sama sekali tidak memadai untuk sebagian besar kasus penggunaan.

• Versi dasar model ini memiliki bug dalam kodenya sehingga hasil baseline menjadi terlalu tinggi, dan masalahnya sedang diselidiki.

• Saya penasaran apakah pikiran nonverbal juga bisa bekerja. Misalnya, mungkin saja pikiran atau mimpi anjing dapat dipahami berdasarkan dataset sinyal yang berkaitan dengan aktivitas sehari-hari.

• Terlepas dari semua implikasi mengerikannya, teknologi ini memungkinkan sesuatu yang sangat keren: komunikasi mental dua arah.

  • Memikirkan pesan lalu memikirkan "kirim", kemudian mendengar balasan melalui earbud. Dengan menggunakan teknologi kloning suara, pesan bisa diterima dengan suara pengirim. Bagi pengamat luar, semuanya benar-benar sunyi dan tak terlihat.