Aller au contenu
Nouveau

Neural Networks: Zero to Hero - Andrej Karpathy (en anglais)

Construire des réseaux de neurones, puis GPT, de zéro et en code

AvancéAnglaisMis à jour le octobre 2026

Vidéos de Andrej Karpathy

Cours gratuit composé de vidéos YouTube publiques de Andrej Karpathy, sélectionnées et organisées par 3alamni. Les vidéos restent la propriété de leur auteur et sont lues depuis YouTube.

Voir la source sur YouTube
1 leçon en aperçu gratuit

Gratuit

Ce cours comprend

  • 10 leçons
  • 19 h 21 de vidéo et de contenu
  • Accès à votre rythme

Ce que vous apprendrez

  • Comprendre et coder la rétropropagation
  • Construire des modèles de langage, du MLP au Transformer
  • Construire un GPT et son tokenizer, puis reproduire GPT-2

Programme du cours

3 sections · 10 leçons · 19 h 21

Fondations : rétropropagation et modèles de langage2 leçons
  • The spelled-out intro to neural networks and backpropagation: building micrograd146 min
  • The spelled-out intro to language modeling: building makemoreRéservé aux inscrits118 min
makemore : du MLP à WaveNet4 leçons
  • Building makemore Part 2: MLPRéservé aux inscrits76 min
  • Building makemore Part 3: Activations & Gradients, BatchNormRéservé aux inscrits116 min
  • Building makemore Part 4: Becoming a Backprop NinjaRéservé aux inscrits115 min
  • Building makemore Part 5: Building a WaveNetRéservé aux inscrits56 min
GPT : construire, tokeniser, reproduire4 leçons
  • Let's build GPT: from scratch, in code, spelled out.Réservé aux inscrits116 min
  • State of GPT | BRK216HFSRéservé aux inscrits43 min
  • Let's build the GPT TokenizerRéservé aux inscrits134 min
  • Let's reproduce GPT-2 (124M)Réservé aux inscrits241 min

Prérequis

  • Bon niveau en Python
  • Bases de mathématiques (dérivées, matrices)
  • Lire l'anglais

Description

Langue du cours : Anglais

Parcours gratuit qui organise la playlist « Neural Networks: Zero to Hero » d'Andrej Karpathy (ancien directeur de l'IA chez Tesla, membre fondateur d'OpenAI) : rétropropagation codée à la main (micrograd), modèles de langage (makemore : MLP, BatchNorm, WaveNet), puis construction de GPT, de son tokenizer et la reproduction de GPT-2. Cours en anglais, entièrement en code Python. Les vidéos appartiennent à Andrej Karpathy et sont lues depuis YouTube.

Avis des étudiants

Aucun avis pour l'instant. Les étudiants inscrits pourront partager leur expérience ici.

Remboursement

Un problème avec un achat ? Notre équipe examine chaque demande de remboursement. CGU §5 · Contacter le support

Signaler ce cours

D'autres cours de la catégorie Intelligence Artificielle.