Benchmark Validity

Technologie

• Des chercheurs de Stanford ont testé 50 affirmations largement citées sur les LLM contre 20 modèles actuels et ont constaté que 44 % des conclusions sont déjà obsolètes, avec 34 % supplémentaires considérablement affaiblies. La durée de vie moyenne d'une affirmation n'est que de 15,7 mois, et les affirmations sur ce que les modèles ne peuvent pas faire expirent le plus rapidement.

  Recherche IA • The Decoder

  Lien permanent