Skip to content
Inteligencia IAJul 8, 2026Inteligencia IA
Artigo

OpenAI descobre que cerca de 30% das tarefas no benchmark SWE-Bench Pro estão quebradas.

A empresa retira sua recomendação anterior de adotar o benchmark e recomenda cautela ao avaliar as capacidades de codificação de IA.

Editorial Data Cube AIFonte: Techmeme
01

Brief da fonte

OpenAI descobre que cerca de 30% das tarefas no benchmark SWE-Bench Pro estão quebradas. A empresa retira sua recomendação anterior de adotar o benchmark e recomenda cautela ao avaliar as capacidades de codificação de IA.