- Kursus pengembangan jaringan saraf yang dibuat oleh Andrej Karpathy, mantan kepala AI di Tesla
- Membangun mulai dari dasar-dasar backpropagation hingga jaringan saraf dalam modern seperti GPT
- Model bahasa sangat cocok untuk mempelajari deep learning. Bahkan jika nantinya diperluas ke bidang seperti computer vision, sebagian besar materi pembelajarannya bisa langsung diterapkan
Syllabus
- (2h25m) Pengantar terperinci tentang jaringan saraf dan backpropagation: membangun micrograd
- (1h57m) Pengantar terperinci tentang language modeling: membangun makemore
- (1h15m) Membangun makemore Bagian 2: MLP
- (1h55m) Membangun makemore Bagian 3: Activations & Gradients, BatchNorm
- (1h55m) Membangun makemore Bagian 4: Menjadi Ninja Backprop
- (56m) Membangun makemore Bagian 5: Membangun WaveNet
- (1h56m) Mari membangun GPT: dari nol, dalam kode, dijelaskan langkah demi langkah.
2 komentar
Ya
Minggu lalu saya hanya membagikan tautan Let's build GPT - Mari membuat GPT dari nol [video YouTube],
ternyata ini hanya sebagian dari keseluruhan kursus.