1 poin oleh GN⁺ 2024-05-15 | 1 komentar | Bagikan ke WhatsApp

1 komentar

 
GN⁺ 2024-05-15
Opini Hacker News
  • Menariknya, Karpathy dan Sutskever kini sama-sama telah meninggalkan OpenAI
    Sekarang OpenAI tampak berjalan dengan berpusat pada Sam Altman dan Greg Brockman
    Di antara empat orang itu, Karpathy dan Sutskever adalah yang paling mengesankan, dan semoga mereka terus melakukan hal-hal besar ke depannya

    • Enam ilmuwan teratas sudah pergi sejak lama, dan OpenAI kini menjadi perusahaan yang dijalankan oleh orang-orang pemasaran, bisnis, software, dan produk
      Jika gelombang inovasi deep learning berikutnya menyapu dunia, Microsoft tampaknya akan mengambil apa yang tersisa
      Mereka akan menghasilkan banyak uang, tetapi jika tidak bisa menggantikan apa yang hilang, masa depannya tampak tidak ada
    • Karpathy masih merupakan tokoh besar di bidang machine learning/AI, dan salah satu dari sedikit orang yang tetap layak diikuti di Twitter/X
    • Menurutku Dario juga kurang mendapat pengakuan
    • Aku sangat menyukai Karpathy
      Ia seperti cendekiawan serba tahu klasik sekaligus guru
    • Meski begitu, Jakub Pachocki masih ada di OpenAI
  • Jan Leike juga menyatakan akan pergi https://twitter.com/janleike/status/1790603862132596961

    • Skenario yang terbayang di kepalaku adalah mereka menekan penolakan tim safety demi merilis model baru sebelum Google IO
    • Yang disebut superalignment tampaknya juga menghilang seperti ini
      Ilya, Jan Leike, William Saunders, Leopold Aschenbrenner semuanya pergi
    • Ia adalah orang yang menulis “Bad universal priors and notions of optimality”, dan sosok yang melakukan terhadap program MIRI milik Hutter sesuatu yang mirip dengan apa yang dilakukan Gödel terhadap program Hilbert
  • Setiap kali berjalan di sekitar University of Toronto, aku sering teringat pemandangan sekitar 10 tahun lalu ketika Ilya mencoba memahami sesuatu di lab sebelah Alex
    Sulit dipercaya gelombang AI baru ini bermula dari sana
    Ilya, Karpathy, Jimmy Ba, dan banyak lainnya berada di sana pada waktu yang tepat ketika Hinton ada

    • Saat itu University of Toronto benar-benar luar biasa
      Dari kelompok itu juga muncul versi penambangan Bitcoin berbasis GPU
      Sekitar 2014, Ethereum juga lahir di sekitar sana, dan aku ingat pertemuan awal Ethereum bersama Vitalik di dekat Queen dan Spadina
      Namun seperti yang dikatakan orang lain, meski ada tokoh-tokoh seperti Geoffrey Hinton, bapak deep learning, serta Ilya dan Vitalik, kita hampir tidak memperoleh manfaat nyata dari sana
    • Namun tak satu pun dari mereka mendirikan perusahaan AI di Toronto
      Sebagai orang Kanada, mengecewakan melihat betapa tidak efisiennya kita dalam membangun perusahaan yang sukses
  • Setelah upaya pemecatan itu, hal ini tampak hampir tak terhindarkan, dan mungkin mereka sedang mengatur detail kepergiannya
    Tapi tepat sehari setelah pengumuman fitur baru?

    • “Kalau kamu membawa fitur besar berikutnya sampai rilis, kami akan melepasmu dengan baik-baik” mungkin merupakan bagian dari kesepakatan sebelumnya
    • Melihat ia pernah mengatakan dalam wawancara bahwa untuk mencapai tahap pemahaman berikutnya diperlukan pembelajaran multimodal end-to-end, menurutku Omni adalah pekerjaannya
    • Ia mungkin sudah memikirkannya cukup lama, dan ketika perhatian terhadap dirinya meningkat bersamaan dengan rilis, ia mungkin diminta mengambil keputusan
    • Bisa juga ini langkah yang cerdik
      Berita OpenAI menyusup di sekitar Google IO dan mengambil perhatian dari Google, dan karena baru saja membuat pengumuman besar, dampak berita negatifnya juga sedikit berkurang
    • Jika kabar kepergian muncul setelah pengumuman fitur baru, orang-orang relatif kurang memperhatikannya dibandingkan waktu lain
  • Jakub Pachocki luar biasa
    Ia masuk 20 besar dalam kompetisi algoritma Polandia
    https://oi.edu.pl/contestants/Jakub%20Pachocki/

  • Ini nasib umum ketika orang-orang idealis membangun sesuatu yang hebat, lalu dalam perebutan kekuasaan dibuang oleh manajemen
    Sudah seberapa sering hal seperti ini berulang?

    • Seberapa sering? Itu adalah dasar dari model ekonomi paling sukses umat manusia
      Sebagian mungkin tidak dibuang, tetapi mereka tidak akan pernah mendapat pengakuan yang cukup dibandingkan pemimpin clueless dengan senyum sejuta dolar yang berurusan dengan orang-orang bodoh dan mereka yang memegang dompet satu miliar dolar
      Meski begitu, kita harus bersyukur kepada Tuhan atau alam bahwa ada orang-orang dalam spesies kita yang memahami dan menciptakan sesuatu
    • Orang yang dibutuhkan untuk revolusi dan orang yang dibutuhkan setelah revolusi tidak sama
  • Ungkapan “membuat AI umum bermanfaat bagi semua orang” adalah Don’t Be Evil yang baru

    • “Kami ingin menaruh AI di tangan Anda”
      Untuk disimpan?
      Tidak! Kenapa kamu berpikir begitu, dasar penjahat…
      OpenAI berarti kamu harus mengulurkan tangan melewati sarung tangan karet tebal dan plexiglass, memohon satu suntikan AI lagi
  • Aku tidak mengerti mengapa perpindahan para teknolog diperlakukan seperti perubahan roster pemain tim olahraga liga utama
    Apakah para influencer yang “namanya saja disebut-sebut” ini pintar? Tentu
    Tapi kepintaran tidak selangka itu
    Mereka juga teknolog seperti kebanyakan orang di sini, dan bukan karena mereka jauh lebih pintar, melainkan lebih karena mereka beruntung dalam arah karier dan spesialisasi
    Mereka juga bukan jenius bisnis, hanya orang-orang yang memegang peran
    Apakah perubahan kepemimpinan memengaruhi bisnis? Sampai batas tertentu mungkin, tetapi kemungkinan hanya sekitar 5% dari yang diperkirakan dari kehebohan gosip seputar tokoh-tokoh AI
    Sudah cukup
    Lihat teknologinya, lihat pekerjaan nyatanya
    Jumlah orang yang terdampak secara profesional oleh perpindahan tempat mereka menerima gaji jauh lebih dekat ke 0 daripada 50%

    • Tidak, mereka adalah orang-orang yang mendefinisikan perusahaan, dan posisi seperti itu jauh lebih sulit digantikan serta merupakan peran yang mereka ciptakan sendiri
  • Apakah tujuan berikutnya Meta?
    Banyak uang masuk ke divisi AI, sumber daya komputasinya juga besar, dan sepertinya ia bisa melakukan riset apa pun yang ia inginkan

    • Kemungkinan besar tidak
      Politik internalnya saja sudah cukup untuk membuat kebanyakan orang gila
  • Tidak mungkin tidak penting bahwa orang-orang yang mengabdikan 10 tahun terakhir pada pekerjaan yang menjadi terobosan telah pergi
    Keliru jika menganggap keberuntungan mereka akan terus berlanjut dan eksodus ini bukan sinyal kemunduran OpenAI
    Mungkin lebih baik mencairkan nilai reputasi selagi masih berharga
    Tampaknya lebih mungkin tim-tim lainlah yang akan membuka jalan baru