DébutantFondamentaux
Réseau de neurones
En anglais : Neural Network
Modèle mathématique composé de nombreuses unités de calcul simples, organisées en couches et reliées entre elles, dont les connexions sont ajustées pendant l’entraînement pour accomplir une tâche.
Chaque « neurone » artificiel reçoit des nombres, les multiplie par des poids, les additionne et transmet le résultat à la couche suivante. L’inspiration vient vaguement du cerveau, mais le fonctionnement reste purement mathématique. Pendant l’entraînement, les poids sont corrigés petit à petit pour réduire les erreurs, un peu comme on règle les curseurs d’une table de mixage jusqu’à obtenir le bon son. Un réseau qui empile beaucoup de couches est dit « profond », d’où l’expression deep learning.
Exemple
Le clavier d’un smartphone peut utiliser un petit réseau de neurones pour suggérer le mot le plus probable à mesure que l’on tape.
Notions liées
Deep learning (apprentissage profond)
DébutantSous-domaine du machine learning qui utilise des réseaux de neurones comportant de nombreuses couches successives pour apprendre des représentations de plus en plus abstraites à partir de données brutes.
Descente de gradient
AvancéMéthode d’optimisation qui ajuste pas à pas les paramètres d’un modèle dans la direction qui fait le plus diminuer la fonction de perte, d’après la pente calculée localement.