Kaplan a dirigé "Scaling Laws for Neural Language Models" (2020, auteur principal avec des collaborateurs d'OpenAI), l'article qui a formalisé ce que le domaine observait empiriquement : la perte d'entraînement des LLM suit une loi de puissance propre en fonction du calcul, des paramètres et de la taille du jeu de données, avec des exposants prévisibles. Le résultat est devenu l'instrument de planification de chaque entraînement ultérieur à grande échelle — si vous connaissez la courbe de perte, vous pouvez budgéter calcul et données pour atteindre une performance cible avec peu de surprises. La limite méthodologique, que l'article lui-même prenait soin de signaler et que le domaine a depuis redécouverte à ses dépens, est que la mise à l'échelle régulière de la perte ne se traduit pas proprement en mise à l'échelle régulière d'une capacité particulière — les discontinuités de capacités émergentes vivent dans l'écart entre perte agrégée et évaluation au niveau de la tâche.

À lire lorsque
vous voulez comprendre ce que la théorie sous-jacente des lois d'échelle prédit, ce qu'elle ne prédit pas, et où se situe réellement la frontière méthodologique entre prédiction au niveau de la perte et évaluation au niveau des capacités.
Thèmes
lois d'échelle pour l'entraînement des modèles de langage; écart entre mise à l'échelle de la perte agrégée et prédiction des capacités au niveau de la tâche; fondements méthodologiques de l'entraînement des LLM à grande échelle.
Travaux clés
"Scaling Laws for Neural Language Models" (2020, auteur principal); recherches ultérieures sur la mise à l'échelle et les capacités à Anthropic; œuvre méthodologique issue de la physique théorique vers le ML.