Validez De Benchmarks

Tecnología

• Investigadores de Stanford probaron 50 afirmaciones ampliamente citadas sobre los LLM contra 20 modelos actuales y encontraron que el 44% de los hallazgos ya están caducados, y otro 34% significativamente debilitados. La vida útil promedio de una afirmación es de solo 15,7 meses, y las afirmaciones sobre lo que los modelos no pueden hacer caducan más rápido.

  Investigación en IA • The Decoder

  Enlace permanente