Skip to content
AIインテリジェンスFeb 23, 2026AIインテリジェンス
記事

OpenAIは、人気のあるAIコーディングベンチマークSWE-bench Verifiedの廃止を呼びかけています。

同社は、ほとんどのタスクに欠陥があり、主要なAIモデルは訓練中にすでに答えを見た可能性が高いと主張しています。したがって、このベンチマークは実際のコーディング能力ではなく、暗記力を測定しています。

AI生成:要約はリンク先の情報源をもとにAIが作成しています。 AIの利用について

AI生成出典: The Decoder
01

ソース要約

OpenAIは、人気のあるAIコーディングベンチマークSWE-bench Verifiedの廃止を呼びかけています。同社は、ほとんどのタスクに欠陥があり、主要なAIモデルは訓練中にすでに答えを見た可能性が高いと主張しています。したがって、このベンチマークは実際のコーディング能力ではなく、暗記力を測定しています。

02
研究 & 開発OpenAI研究ベンチマーク号を見る