Loi de Mise à l'Échelle
S
Loi de Mise à l'Échelle
Définition
Des relations empiriques montrant comment les performances des modèles d'IA s'améliorent de manière prévisible à mesure que la taille du modèle, du jeu de données ou du budget de calcul augmente. Les lois de mise à l'échelle ont guidé le développement de modèles de fondation de plus en plus grands et aident à prédire les capacités avant l'entraînement.