IntermédiaireModèles & LLM
Modèle de raisonnement
En anglais : Reasoning model
Modèle de langage entraîné à produire un raisonnement intermédiaire, souvent appelé réflexion ou thinking, avant de formuler sa réponse finale, afin de mieux traiter les problèmes complexes.
Au lieu de répondre immédiatement, le modèle génère d’abord une longue suite de tokens où il décompose le problème, explore des pistes, vérifie et corrige ses étapes. Cette capacité est développée notamment par apprentissage par renforcement, en récompensant les réponses justes sur des problèmes vérifiables comme les mathématiques ou le code. Les gains sont nets sur ce type de tâches, mais chaque réponse consomme plus de tokens, coûte plus cher et arrive plus lentement ; beaucoup d’outils permettent donc de régler un budget de réflexion. Le raisonnement affiché ne reflète pas toujours fidèlement le calcul interne réel du modèle.
Exemple
Un développeur active le mode réflexion d’un assistant pour déboguer un algorithme délicat, mais le désactive pour de simples reformulations afin de gagner du temps.
Notions liées
Apprentissage par renforcement
IntermédiaireMéthode de machine learning dans laquelle un agent apprend à agir dans un environnement en recevant des récompenses ou des pénalités selon les conséquences de ses actions.
Budget de réflexion (thinking budget)
AvancéParamètre qui fixe la quantité maximale de tokens qu’un modèle de raisonnement peut consacrer à sa phase de réflexion interne avant de formuler sa réponse finale.