Akhir-akhir ini perusahaan big tech bertumbuh dengan menaikkan jumlah parameter; apakah sekarang arahnya mulai berubah?
Secara pribadi, saya memang merasa pertumbuhan dengan terus menaikkan parameter lama-lama sebenarnya tidak punya jawaban yang jelas.
Rasanya seperti mengorbankan masa depan yang dekat demi pertumbuhan, begitu mungkin ya? Terutama saat MoE terlihat paling parah.
Dulu Google Gemma 3 27b termasuk cukup besar, tetapi sekarang di ranah LLM jumlah parameter sebesar itu malah terlihat seperti sedikit.
Kemajuan teknologi memang penting, tetapi rasanya perlu ada sesuatu yang juga mempertimbangkan tahap penyajiannya di dunia nyata, dan kali ini sepertinya percobaan yang cukup baik.
(Alasan saya skeptis terhadap bertambahnya parameter adalah karena saya tahu performanya bagus, tetapi biaya untuk menyajikannya jadi jauh lebih besar.)
Senang bertemu dengan Anda. Terima kasih sudah membacanya dengan antusias!
Saat Anda mulai menerapkannya, kalau ada pertanyaan jangan ragu untuk meninggalkannya kapan saja!!
Saya sendiri belakangan ini memang sangat sering memakai model berbasis Qwen secara lokal.
Awalnya saya kira ya karena ini model Alibaba, tetapi cara mereka terus memperbaiki dan memperluasnya benar-benar mengagumkan.
Saya berpendapat bahwa sistem pemungutan suara elektronik tidak dapat menyelesaikan masalah verifikasi keandalan secara acak oleh publik luas.
Verifikasi kode sistem hanya mungkin dilakukan oleh lapisan khusus yang terseleksi, dan kita juga tidak bisa benar-benar mempercayai apakah kode yang diverifikasi itu memang sama dengan kode yang digunakan di lapangan.
Melihat kontroversi apa yang terjadi dan kekacauan sosial seperti apa yang muncul di Korea Selatan, yang hanya mengelektronisasi proses pengumpulan hasil surat suara kertas ke dalam sistem elektronik, tampaknya kita bisa secara kasar memperkirakan kekacauan sosial seperti apa yang akan terjadi jika sistem pemungutan suara elektronik penuh diperkenalkan.
Pendapat saya agak berbeda; berdasarkan pengalaman saya, semua orang yang memiliki kemampuan dan sikap seperti itu justru memiliki harga diri yang sangat tinggi.
Tulisannya sangat berguna. Saat menetapkan aturan AST, saya sempat susah sendiri karena awalnya mencoba mengotomatisasi semuanya... Setelah dijalani, ternyata jawabannya adalah mengecualikan kasus-kasus yang ambigu dan hanya menetapkan yang benar-benar pasti.
Menurut saya ini tulisan yang benar-benar punya insight.
Saya adalah developer senior aktif dengan 23 tahun pengalaman, dan sejak paruh kedua 2024 saya sedang mencoba mendorong penggunaan pengembangan berbasis LLM dan vibe coding sampai ke titik ekstrem. Saya memakainya untuk sangat beragam hal, mulai dari AOS/iOS, full-stack web service, batch job, sampai fine-tuning model, dan biasanya saya bekerja dengan menyalakan sekitar 5 agen.
Saya tidak menyangka akan kembali mengalami momen tertidur setelah asyik ngoding sampai lupa waktu, sesuatu yang belum saya rasakan lagi sejak awal 2000-an haha.
Singkatnya, belakangan ini saya berpikir bahwa ranah pengembangan kini sudah menjadi sesuatu yang bisa dilakukan siapa saja.
Perkembangan agen coding akan makin dipercepat, dan pengembangan akan menjadi semakin mudah dan nyaman. Mungkin nantinya akan setara dengan membuat dokumen Excel atau Word.
Seperti kata Andrej Karpathy, bahasa pemrograman terbaik adalah "bahasa Inggris", dan saya setuju dengan itu.
Secara pribadi, saya jadi lebih banyak membaca paper AI, dan juga lebih banyak menulis agar bisa mengekspresikan sesuatu secara logis. (Saya juga berusaha lebih sering berdialog dengan AI.)
Akhir-akhir ini memang benar-benar terasa sangat seru.
Saya baru mengakui kalau seluruh tim Deno dipecat dan dia sendirian yang tersisa.
Terima kasih. Ke depannya juga mohon terus banyak digunakan dengan antusias :)
Terima kasih atas pendapat yang bagus!
Terima kasih. Akan saya sampaikan dengan baik kepada pembuatnya :)
Komentar ini sempat muncul beberapa hari lalu, dan komentar-komentar di Hacker News tentang ini cukup menarik.
Akhir-akhir ini perusahaan big tech bertumbuh dengan menaikkan jumlah parameter; apakah sekarang arahnya mulai berubah?
Secara pribadi, saya memang merasa pertumbuhan dengan terus menaikkan parameter lama-lama sebenarnya tidak punya jawaban yang jelas.
Rasanya seperti mengorbankan masa depan yang dekat demi pertumbuhan, begitu mungkin ya? Terutama saat MoE terlihat paling parah.
Dulu Google Gemma 3 27b termasuk cukup besar, tetapi sekarang di ranah LLM jumlah parameter sebesar itu malah terlihat seperti sedikit.
Kemajuan teknologi memang penting, tetapi rasanya perlu ada sesuatu yang juga mempertimbangkan tahap penyajiannya di dunia nyata, dan kali ini sepertinya percobaan yang cukup baik.
(Alasan saya skeptis terhadap bertambahnya parameter adalah karena saya tahu performanya bagus, tetapi biaya untuk menyajikannya jadi jauh lebih besar.)
Seperti dugaan, ini ternyata dampak yang muncul setelah upaya merilis cadangan penuh Spotify yang memang terlalu nekat.
Semangat, Second B!
Senang bertemu dengan Anda. Terima kasih sudah membacanya dengan antusias!
Saat Anda mulai menerapkannya, kalau ada pertanyaan jangan ragu untuk meninggalkannya kapan saja!!
Saya sendiri belakangan ini memang sangat sering memakai model berbasis Qwen secara lokal.
Awalnya saya kira ya karena ini model Alibaba, tetapi cara mereka terus memperbaiki dan memperluasnya benar-benar mengagumkan.
Oh.. kelihatannya bagus
Kalau bisa langsung beralih lewat fitur bagikan di aplikasi YouTube mobile, sepertinya akan jauh lebih berguna
Pada akhirnya, regulasi itu memang selalu menimbulkan biaya. Yah, bagaimanapun juga itu adalah bagian yang harus ditanggung konsumen.
Saya berpendapat bahwa sistem pemungutan suara elektronik tidak dapat menyelesaikan masalah verifikasi keandalan secara acak oleh publik luas. Verifikasi kode sistem hanya mungkin dilakukan oleh lapisan khusus yang terseleksi, dan kita juga tidak bisa benar-benar mempercayai apakah kode yang diverifikasi itu memang sama dengan kode yang digunakan di lapangan. Melihat kontroversi apa yang terjadi dan kekacauan sosial seperti apa yang muncul di Korea Selatan, yang hanya mengelektronisasi proses pengumpulan hasil surat suara kertas ke dalam sistem elektronik, tampaknya kita bisa secara kasar memperkirakan kekacauan sosial seperti apa yang akan terjadi jika sistem pemungutan suara elektronik penuh diperkenalkan.
Tulisan yang sangat menarik..!
Saat ini kode front-end proyek saya berantakan, jadi sepertinya saya harus mencobanya!
Terima kasih sudah melihatnya dengan baik!!
Pendapat saya agak berbeda; berdasarkan pengalaman saya, semua orang yang memiliki kemampuan dan sikap seperti itu justru memiliki harga diri yang sangat tinggi.
Skip – pengembangan aplikasi iOS dan Android native dengan satu codebase Swift
Tulisannya sangat berguna. Saat menetapkan aturan AST, saya sempat susah sendiri karena awalnya mencoba mengotomatisasi semuanya... Setelah dijalani, ternyata jawabannya adalah mengecualikan kasus-kasus yang ambigu dan hanya menetapkan yang benar-benar pasti.
Menurut saya ini tulisan yang benar-benar punya insight.
Saya adalah developer senior aktif dengan 23 tahun pengalaman, dan sejak paruh kedua 2024 saya sedang mencoba mendorong penggunaan pengembangan berbasis LLM dan vibe coding sampai ke titik ekstrem. Saya memakainya untuk sangat beragam hal, mulai dari AOS/iOS, full-stack web service, batch job, sampai fine-tuning model, dan biasanya saya bekerja dengan menyalakan sekitar 5 agen.
Saya tidak menyangka akan kembali mengalami momen tertidur setelah asyik ngoding sampai lupa waktu, sesuatu yang belum saya rasakan lagi sejak awal 2000-an haha.
Singkatnya, belakangan ini saya berpikir bahwa ranah pengembangan kini sudah menjadi sesuatu yang bisa dilakukan siapa saja.
Perkembangan agen coding akan makin dipercepat, dan pengembangan akan menjadi semakin mudah dan nyaman. Mungkin nantinya akan setara dengan membuat dokumen Excel atau Word.
Seperti kata Andrej Karpathy, bahasa pemrograman terbaik adalah "bahasa Inggris", dan saya setuju dengan itu.
Secara pribadi, saya jadi lebih banyak membaca paper AI, dan juga lebih banyak menulis agar bisa mengekspresikan sesuatu secara logis. (Saya juga berusaha lebih sering berdialog dengan AI.)
Akhir-akhir ini memang benar-benar terasa sangat seru.
Oh, ini bagus ya.