Selon un extrait de transcription
Sam Witteveen explique que le nouvel indice de référence Intelligence Index 5.0 d'Artificial Analysis montre que les modèles ouverts sont désormais à 12 points derrière les modèles fermés, contre 3 auparavant. Les nouveaux tests utilisent 60 % de jeux de données privés exclus et des tâches plus agentices, de sorte que les anciens classements peuvent avoir flatté les modèles locaux—les spectateurs sont invités à réaliser leurs propres évaluations.
Généré par IA : résumés rédigés par une IA à partir des sources citées. Notre usage de l'IA
Brief source
Selon un extrait de transcription : Sam Witteveen explique que le nouvel indice de référence Intelligence Index 5.0 d'Artificial Analysis montre que les modèles ouverts sont désormais à 12 points derrière les modèles fermés, contre 3 auparavant. Les nouveaux tests utilisent 60 % de jeux de données privés exclus et des tâches plus agentices, de sorte que les anciens classements peuvent avoir flatté les modèles locaux—les spectateurs sont invités à réaliser leurs propres évaluations.