Tag: modèles compressés

Distiller le raisonnement : Les petits modèles linguistiques peuvent-ils apprendre la chaîne de raisonnement ?

King Willie
|
mars 20
|
0

Les petits modèles linguistiques peuvent apprendre à raisonner en copiant la structure des grandes chaînes de pensée, sans avoir besoin de leur taille ou de leur puissance. La clé ? La structure, pas la précision.