Das UK AI Security Institute hat herausgefunden…
…dass herkömmliche KI-Benchmarks die tatsächlichen Fähigkeiten von KI-Agenten systematisch unterschätzen, da sie das Rechenbudget begrenzen. Bei Softwareentwicklungsaufgaben stiegen die Erfolgsraten um etwa 25 %, wenn man den Agenten mehr Rechenzeit gab. Dies wirft Fragen zur Validität aktueller Sicherheitstests auf.
KI-generiert: Die Zusammenfassungen schreibt eine KI auf Grundlage der verlinkten Quellen. So nutzen wir KI
Source Brief
Das UK AI Security Institute hat herausgefunden, dass herkömmliche KI-Benchmarks die tatsächlichen Fähigkeiten von KI-Agenten systematisch unterschätzen, da sie das Rechenbudget begrenzen. Bei Softwareentwicklungsaufgaben stiegen die Erfolgsraten um etwa 25 %, wenn man den Agenten mehr Rechenzeit gab. Dies wirft Fragen zur Validität aktueller Sicherheitstests auf.