Predictable Confabulations: Factual Recall by LLMs Scales with Model Size and Topic Frequency
Signal
78
Hype
15
En 3 lignesÉtude de 38 modèles sur 8 900 références académiques : la qualité du rappel factuel suit une sigmoid combinant la taille du modèle et la fréquence du sujet dans les données d'entraînement. Ces deux variables expliquent 60% de la variance entre modèles denses, jusqu'à 74-94% au sein de familles individuelles.Lire la source
Ton avis ?
Résumé généré par Claude — vérifié par l'humain