Comment fonctionnent les LLM, partie 1 : du perceptron aux modèles de raisonnement

Les modèles de langage actuels écrivent du code, résolvent des problèmes d'olympiades et raisonnent étape par étape. Chacune de ces capacités repose sur des idées vieilles de plusieurs décennies. Cette première partie de notre série en sept volets retrace la chronologie depuis un unique neurone artificiel en 1957 jusqu'aux modèles de raisonnement de 2025, pour comprendre comment fonctionnent les modèles et quel problème chaque idée a résolu.